场景重建高斯模型生成方法以及场景重建方法

    公开(公告)号:CN118982611A

    公开(公告)日:2024-11-19

    申请号:CN202410987435.3

    申请日:2024-07-23

    摘要: 本发明公开了一种场景重建高斯模型生成方法以及场景重建方法;包括:根据待训练图像序列确定训练数据,根据训练数据进行高斯模型的训练,生成场景重建高斯模型;根据待训练图像序列确定训练数据,包括:根据待训练图像序列确定点云数据并构建不同层次的锚高斯集合;对待训练图像序列进行分区并确定每个图像分区对应的图像采集装置,对不同层次的锚高斯集合中的锚点进行投影,确定每个图像采集装置的所有可观察锚点,生成每个图像分区的训练集;根据待训练图像序列和三维高斯参数确定训练图像序列中每张待训练图像的约束表达;将图像分区的训练集及约束表达作为训练数据,解决了场景重建质量较差的问题,保证计算效率和重建精度,提高重建质量。

    一种基于三维重建的自动驾驶街景无监督4D自动标注方法

    公开(公告)号:CN118967934A

    公开(公告)日:2024-11-15

    申请号:CN202411091554.7

    申请日:2024-08-09

    摘要: 本发明涉及一种基于三维重建的自动驾驶街景无监督4D自动标注方法,包括:针对输入的逐帧图像进行信息处理,获得逐像素的实例信息和伪点云;根据实例信息和伪点云,进行三维重建,得到重建场景;对于重建场景进行逐帧采样,得到逐实例点云,再进行去噪处理,输出逐帧的3D标注框,从而得到由逐帧图像构成的整个序列的4D标注结果。与现有技术相比,本发明能够在没有真值标注的情况下,仅利用图像信息即可实现3D物体检测,从本质上实现了无监督,直接省去了人工标注和数据预处理的成本,提高了效率并且节省大量计算资源。

    基于类别感知的原型增强小样本分割方法

    公开(公告)号:CN118864843A

    公开(公告)日:2024-10-29

    申请号:CN202410860433.8

    申请日:2024-06-28

    摘要: 本发明公开了一种基于类别感知的原型增强小样本分割方法,将数据集均匀划分为4个子集,将每个子集轮流作为验证集,从中随机抽取1000对支持‑查询图像用于验证环节,另外三个子集作为训练集进行交叉验证。小样本分割网络包括编码器、基学习器、类别感知模块CAM、原型增项模块PEM、编码器和细化模块。CAM基于支持特征和支持掩码,能够同时感知目标类和非目标类,并由此学习类别权重使网络更加关注目标类区域。PEM提取支持原型的同时基于查询图像初始预测提取查询原型,将两种原型相融合生成混合增强原型,同时包含两者的信息,提高最终分割结果的质量。本发明在支持样本数量受限时引导网络更好地避免错误激活,更准确地将目标类分割出来。

    表征动态融合和记忆信息恢复的高效视觉图像生成方法

    公开(公告)号:CN118799222A

    公开(公告)日:2024-10-18

    申请号:CN202411030582.8

    申请日:2024-07-30

    摘要: 本发明涉及一种表征动态融合和记忆信息恢复的高效视觉图像生成方法,包括下列步骤:设计表征感知合并‑解合并模块;加载预训练扩散模型,包括VAE编码器,CLIP文本编码器和去噪网络;选择以文本为提示方式;对于文本提示,将与图像匹配的文本送入CLIP文本编码器,输出文本特征;所述去噪网络为融入了Transformer结构的神经网络,通过神经网络中添加所述的表征感知合并‑解合并模模块修改去噪网络;设定相关超参数包括合并率以及迭代次数,将随机生成的潜空间高斯噪声图像特征和文本特征一起送入修改后的去噪网络中,进行迭代去噪;采用VAE图像解码器恢复图像。

    一种基于细粒度原型和双向校正的小样本分割网络的图像分割方法

    公开(公告)号:CN118781348A

    公开(公告)日:2024-10-15

    申请号:CN202410975989.1

    申请日:2024-07-19

    摘要: 本发明公开一种基于细粒度原型和双向校正的小样本分割网络的图像分割方法,分割网络包括编码器、解码器、细粒度原型生成模块和双向校正模块,步骤如下:S1.对支持图像和查询图像进行特征提取得到支持特征、查询特征;S2.对支持特征和支持图像真值通过掩码平均池化操作提取出通用前景类原型以及通用背景类原型;S3.利用支持特征、支持掩码及通用前景类原型提取出细粒度区域原型,细粒度区域原型包括正确分割预测的前景类区域原型、前景类信息丢失区域原型、正确分割预测的背景类区域原型及错误激活的背景类区域原型;S4.通过双向校正模块获取查询图像的预测掩码;S5.通过细化模块查询图像的预测掩码进一步细化,得到最终的小样本图像分割结果。

    大模型能力多维评测方法和装置
    7.
    发明公开

    公开(公告)号:CN118733413A

    公开(公告)日:2024-10-01

    申请号:CN202410761163.5

    申请日:2024-06-13

    IPC分类号: G06F11/34

    摘要: 本申请提供一种大模型能力多维评测方法和装置,涉及人工智能技术领域,包括:基于模型评测能力体系,确定对各个待评测模型进行评测的多个能力评测维度;确定各个能力评测维度对应的评测题;基于各个能力评测维度对应的评测题,对各个待评测模型进行评测,确定各个待评测模型在各个能力评测维度下的评测结果;基于各个待评测模型在各个能力评测维度下的评测结果,确定各个待评测模型的多维评测结果。本申请提供的方法和装置,提高了大模型能力评测的准确性和全面性。

    基于迭代优化的无训练通用高效语义分割方法

    公开(公告)号:CN118691812A

    公开(公告)日:2024-09-24

    申请号:CN202410716521.0

    申请日:2024-06-04

    摘要: 本发明涉及一种基于迭代优化的无训练通用高效语义分割方法,对预训练的扩散模型进行改进,在提取和选择交叉注意力图和自注意力图之后,获得同样尺度的交叉注意力图Aca和自注意力图Asa,将自注意力图Asa送入熵减自注意力模块中,用于去除不相关的全局信息,方法为:计算自注意力图的熵梯度,通过将自注意力图分布视为离散随机变量的概率质量函数计算自注意力熵,进而计算熵梯度;更新自注意力:通过沿着负梯度方向更新所选择的自注意力图计算熵降低后的自注意力图Aceant;将熵降低后的自注意力图Aseant和交叉注意力图Aca进行矩阵乘法,迭代优化交叉注意力图,将得到的最终交叉注意力Aca尺寸恢复到原图像大小。

    一种自动化知识题目构造方法及装置

    公开(公告)号:CN118551834A

    公开(公告)日:2024-08-27

    申请号:CN202410488856.1

    申请日:2024-04-23

    IPC分类号: G06N5/022

    摘要: 本申请涉及题目自动生成技术领域,具体而言,涉及一种自动化知识题目构造方法及装置,一定程度上可以解决知识问题需要人工构建的问题。所述的自动化知识题目构造方法包括:获取知识数据;根据所述知识数据进行抽取,得到领域信息及扩展信息;基于所述领域信息及所述扩展信息生成候选题目;对所述候选题目进行多轮自动化筛查,得到最终题目;通过资料的多维度信息抽取、问题生成及多轮自动化质检等一系列流程,可以借助大语言模型来构建自动化且可控的题目生成流程,不需要微调及人工质检,从而最大化减少人为参与过程,且生成类型为包含干扰项的选择题,通过独特的选项滚动机制进行鲁棒性评测,可以更容易地获得稳健的评测结果。