-
公开(公告)号：CN119762799A
公开(公告)日：2025-04-04
申请号：CN202411881586.7
申请日：2024-12-19
Applicant: 长三角哈特机器人产业技术研究院
IPC: G06V10/44 , G06V10/74 , G06V10/82 , G06N3/0455 , G06N3/0464 , G06N3/0499 , G06N3/048 , G06N3/045
Abstract: 本发明公开一种基于关键点检测的局部特征匹配系统，包括：编码器、深层Transformer模型以及匹配模块组成；将待匹配的图像对(IA,IB)输入编码器，提取图像对(IA,IB)的精细特征#imgabs0#粗特征#imgabs1#以及关键点PA、PB；将粗特征#imgabs2#及图像对(IA,IB)输入深层Transformer模型，深层Transformer模型对图像IA、图像IB进行特征聚合，获得关键点特征#imgabs3#匹配模块将关键点特征#imgabs4#转换为可信度矩阵C，基于可信度矩阵C进行关键点PA与关键点PB的匹配，再基于精细特征#imgabs5#进行匹配增强，完成图像对(IA,IB)的匹配。采用权重(参数)复用技术根据任务需求共享连续Transformer层之间的任务参数，使模型不仅能保持特征的表达能力，提高模型性能，还能有效降低模型规模；此外，多尺度关键点检测器的使用，减少了冗余信息的传播，增强了特征的特异性，提升模型效率。
-
公开(公告)号：CN117975395A
公开(公告)日：2024-05-03
申请号：CN202410075219.1
申请日：2024-01-18
Applicant: 哈尔滨工业大学 , 长三角哈特机器人产业技术研究院
Abstract: 本发明公开一种环境感知中的多任务参数共享方法，具体如下：(1)通过学习获取每个线性层中任务共享参数、各个任务类型的任务专属参数、及任务共享参数和任务专属参数对应的分数；(2)基于分数是否激活当前线性层的任务共享参数，若结果为是，则将所有任务类型共享任务共享参数，若检测结果为否，则将当前任务类型对应的任务专属参数作为当前线性层的参数。通过将Vision Transformer模型中的线性层参数共享给多个任务类型，其它层参数不共享，既满足了不同任务类型的个性化需求，同时也能就减少Vision Transformer模型中参数存储量，减少了边缘计算设备存储的问题。
-
公开(公告)号：CN119309580A
公开(公告)日：2025-01-14
申请号：CN202411341616.5
申请日：2024-09-25
Applicant: 哈尔滨工业大学 , 长三角哈特机器人产业技术研究院
IPC: G01C21/20 , G01S17/894 , G01S17/86 , G06V10/80
Abstract: 一种基于大模型的展厅机器人视觉语言导航方法，属于展厅机器人领域，本发明为解决现有展厅机器人存在的问题。本发明方法：展厅机器人多模态场景感知系统：感知当前场景，利用RGB图像和激光点云的融合特征获得候选目标物体；提取场景中所有候选目标物体的图像特征；展厅机器人多模态环境理解系统：展厅机器人接受语音指令，并利用视觉语言多模态大模型理解出目标物体及用户意图，然后从系统中提取该目标物体文本的高维语义特征，从候选目标物体中找出目标物体；基于多模态大模型的展厅机器人智能导航系统：展厅机器人按照意图生成的位姿序列进行路径规划与自主移动，并根据展厅机器人多模态场景感知系统提供的实时变化的场景动态调整自身行为。
-
公开(公告)号：CN117852669A
公开(公告)日：2024-04-09
申请号：CN202311795563.X
申请日：2023-12-25
Applicant: 长三角哈特机器人产业技术研究院
IPC: G06N20/00 , G06F18/241
Abstract: 本发明公开了一种加快网络收敛的基于符号的梯度归一化方法，在多任务训练中，针对任务共享参数的梯度方向，通过利用符号掩码的方式均匀化所有任务的任务共享参数的梯度方向；针对特定任务参数，采用梯度平均的方式进行参数更新。本发明的优点在于：保证了在多任务训练中梯度的更新方向始终是最有利于所有任务的，进一步提高多任务训练的效率和性能，避免了负迁移的发生。
-
-
-
Search Results
4
records
(took 0.077 seconds)
