-
公开(公告)号:CN116524111A
公开(公告)日:2023-08-01
申请号:CN202310160908.8
申请日:2023-02-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06T17/00 , G06N3/0464 , G06N3/08
摘要: 本发明涉及一种航天员在轨支持按需轻量场景重建方法及系统,包括:采集目标场景的RGB图像和深度图像;利用目标场景的RGB图像和深度图像,获取目标场景的RGB图像的位姿和目标场景的RGB图像中ORB特征点的三维坐标;以目标场景的RGB图像为预先建立的目标检测网络的输入,输出检测结果,并利用检测结果和目标场景的RGB图像的位姿,生成稠密mesh;检测结果为目标部件在目标场景的RGB图像中的像素位置bounding box;利用目标场景的RGB图像中ORB特征点的三维坐标,生成稀疏mesh;根据稠密mesh和稀疏mesh进行按需轻量三维场景重建。本发明提供的技术方案,通过将稠密mesh和稀疏mesh结合进行三维场景重建,降低了对设备计算性能的要求,减少了数据的存储,有利于天地快速数据传输。
-
公开(公告)号:CN116452742A
公开(公告)日:2023-07-18
申请号:CN202310431542.3
申请日:2023-04-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
摘要: 本发明属于航天技术领域,具体涉及一种航天操作场景的空间布局解析方法及系统,包括:基于预先建立的语义三维重建模型,获取初始航天操作场景中各航天操作结构之间的相对位置;利用混合现实设备采集实时航天操作场景的图像对,并确定图像对中的目标航天操作结构;根据实时航天操作场景的图像对,获取初始航天操作场景中的目标航天操作结构相对于实时航天操作场景中的目标航天操作结构的相对位姿;利用相对位置和相对位姿,获取实时航天操作场景中各航天操作结构的位姿,并将实时航天操作场景中各航天操作结构的位姿在混合现实设备中展示。本发明实现了对航天操作场景中所有航天操作结构的绝对定位,完成空间布局解析。
-
公开(公告)号:CN116342800B
公开(公告)日:2023-10-24
申请号:CN202310181777.1
申请日:2023-02-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06T17/00
摘要: 本发明属于语义三维重建技术领域,具体涉及一种多模态位姿优化的语义三维重建方法及系统,该方法包括:采集目标区域的RGB图像和深度图像;对RGB图像进行语义分割,获取RGB图像的最终掩码图;利用RGB图像、深度图像和最终掩码图,获取RGB图像的全局位姿;根据深度图像和RGB图像的全局位姿获取全局语义三维点云。本申请提供的技术方案,不仅对算力要求较低,适用性广,而且提高了语义三维重建的实时性和效率。
-
公开(公告)号:CN116468889A
公开(公告)日:2023-07-21
申请号:CN202310356730.4
申请日:2023-04-04
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06V10/26 , G06V10/44 , G06V10/82 , G06V20/70 , G06N3/0464
摘要: 本发明属于图像处理技术领域,具体提供了一种基于多分支特征提取的全景分割方法及系统,该方法包括:对RGB图像进行预处理,得到初始图像;将初始图像输入预先构建的全景分割网络,得到初始图像的全景分割结果;预先构建的全景分割网络包括:主干网络、细节提取分支网络、实例定位分支网络、通道注意力分支网络、特征聚合分支网络、特征编码网络和后处理模块。本申请提供的技术方案,不仅能够准确识别不同的前景物体和背景,还能够准确分割物体边缘;通过融合图像的高维特征和低维特征,提取丰富的感受野和空间信息,提升全景分割的整体精度。
-
公开(公告)号:CN116524111B
公开(公告)日:2023-11-07
申请号:CN202310160908.8
申请日:2023-02-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06T17/00 , G06N3/0464 , G06N3/08
摘要: 本发明涉及一种航天员在轨支持按需轻量场景重建方法及系统,包括:采集目标场景的RGB图像和深度图像;利用目标场景的RGB图像和深度图像,获取目标场景的RGB图像的位姿和目标场景的RGB图像中ORB特征点的三维坐标;以目标场景的RGB图像为预先建立的目标检测网络的输入,输出检测结果,并利用检测结果和目标场景的RGB图像的位姿,生成稠密mesh;检测结果为目标部件在目标场景的RGB图像中的像素位置bounding box;利用目标场景的RGB图像中ORB特征点的三维坐标,生成稀疏mesh;根据稠密mesh和稀疏mesh进行按需轻量三维场景重建。本发明提供的技术方案,通过将稠密mesh和稀疏mesh结合进行三维场景重建,降低了对设备计算性能的要求,减少了数据的存储,有利于天地快速数据传输。
-
公开(公告)号:CN116452742B
公开(公告)日:2023-11-03
申请号:CN202310431542.3
申请日:2023-04-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
摘要: 本发明属于航天技术领域,具体涉及一种航天操作场景的空间布局解析方法及系统,包括:基于预先建立的语义三维重建模型,获取初始航天操作场景中各航天操作结构之间的相对位置;利用混合现实设备采集实时航天操作场景的图像对,并确定图像对中的目标航天操作结构;根据实时航天操作场景的图像对,获取初始航天操作场景中的目标航天操作结构相对于实时航天操作场景中的目标航天操作结构的相对位姿;利用相对位置和相对位姿,获取实时航天操作场景中各航天操作结构的位姿,并将实时航天操作场景中各航天操作结构的位姿在混合现实设备中展示。本发明实现了对航天操作场景中所有航天操作结构的绝对定位,完成空间布局解析。
-
公开(公告)号:CN116468889B
公开(公告)日:2023-11-07
申请号:CN202310356730.4
申请日:2023-04-04
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06V10/26 , G06V10/44 , G06V10/82 , G06V20/70 , G06N3/0464
摘要: 本发明属于图像处理技术领域,具体提供了一种基于多分支特征提取的全景分割方法及系统,该方法包括:对RGB图像进行预处理,得到初始图像;将初始图像输入预先构建的全景分割网络,得到初始图像的全景分割结果;预先构建的全景分割网络包括:主干网络、细节提取分支网络、实例定位分支网络、通道注意力分支网络、特征聚合分支网络、特征编码网络和后处理模块。本申请提供的技术方案,不仅能够准确识别不同的前景物体和背景,还能够准确分割物体边缘;通过融合图像的高维特征和低维特征,提取丰富的感受野和空间信息,提升全景分割的整体精度。
-
公开(公告)号:CN116342800A
公开(公告)日:2023-06-27
申请号:CN202310181777.1
申请日:2023-02-21
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G06T17/00
摘要: 本发明属于语义三维重建技术领域,具体涉及一种多模态位姿优化的语义三维重建方法及系统,该方法包括:采集目标区域的RGB图像和深度图像;对RGB图像进行语义分割,获取RGB图像的最终掩码图;利用RGB图像、深度图像和最终掩码图,获取RGB图像的全局位姿;根据深度图像和RGB图像的全局位姿获取全局语义三维点云。本申请提供的技术方案,不仅对算力要求较低,适用性广,而且提高了语义三维重建的实时性和效率。
-
公开(公告)号:CN115790581A
公开(公告)日:2023-03-14
申请号:CN202211502923.8
申请日:2022-11-28
申请人: 中国航天员科研训练中心 , 中国人民解放军战略支援部队航天工程大学
IPC分类号: G01C21/16
摘要: 本发明涉及增强现实技术领域,具体提供了一种基于在轨特因环境的高速VSLAM增强现实头盔自主定位方法,包括:通过增强现实设备上的视觉传感器采集在轨特因环境中的图像信息;基于前一帧图像对当前帧图像对应的视觉传感器的位姿进行实时计算;其中,当所述当前帧图像的帧数为当前计算周期内的结束帧时,对当前计算周期内的图像对应的视觉传感器的位姿进行局部优化;当检测到回环时,对回环帧到当前帧之间的图像对应的视觉传感器的位姿进行全局优化。本发明提供的技术方案很好地解决了在轨特因环境下的增强现实头盔定位的问题。
-
-
-
-
-
-
-
-