受限空间内矢量空间搭建与图像融合建模的方法和装置

    公开(公告)号:CN117557727B

    公开(公告)日:2024-09-03

    申请号:CN202311577506.4

    申请日:2023-11-23

    摘要: 本发明提出一种受限空间内矢量空间搭建与全景图像融合建模的方法和装置,通过全景图像采集设备获取受限空间内的全景图像和空间音频等数据,与搭建的多边体矢量空间融合,实现场景内自由移动与显示。通过布置的标志点对全景图像进行拼接、正射投影和几何校正等,根据时序将处理好的全景图像组输出成为全景视频流。再根据受限空间的大小构建矢量空间并嵌入全景视频流、摄像点、3D导航视角和空间音频点,使得每个像素都有三维坐标,形成视频流矢量空间。根据视角移动时的空间位置与摄像点位置对全景视频流投影变换。将整体模型融合优化后在显示设备上进行沉浸式展示和巡检。为受限空间内诸如矿山采掘工作面等工业生产环境空间搭建提供技术支持。

    受限空间内矢量空间搭建与图像融合建模的方法和装置

    公开(公告)号:CN117557727A

    公开(公告)日:2024-02-13

    申请号:CN202311577506.4

    申请日:2023-11-23

    摘要: 本发明提出一种受限空间内矢量空间搭建与全景图像融合建模的方法和装置,通过全景图像采集设备获取受限空间内的全景图像和空间音频等数据,与搭建的多边体矢量空间融合,实现场景内自由移动与显示。通过布置的标志点对全景图像进行拼接、正射投影和几何校正等,根据时序将处理好的全景图像组输出成为全景视频流。再根据受限空间的大小构建矢量空间并嵌入全景视频流、摄像点、3D导航视角和空间音频点,使得每个像素都有三维坐标,形成视频流矢量空间。根据视角移动时的空间位置与摄像点位置对全景视频流投影变换。将整体模型融合优化后在显示设备上进行沉浸式展示和巡检。为受限空间内诸如矿山采掘工作面等工业生产环境空间搭建提供技术支持。

    一种地理空间到高精度数字空间的设备管控系统和方法

    公开(公告)号:CN117528026A

    公开(公告)日:2024-02-06

    申请号:CN202311396230.X

    申请日:2023-10-25

    摘要: 本发明提供一种地理空间到高精度数字空间的设备管控系统和方法,包括:构建与生产现场结构特征相同的工业生产场景和机电设备模型以及管控方法,形成数字孪生系统;构建视频流系统,实时连续输出基于正射投影、几何校正和全景拼接图像和音频融合的生产场景视频流数据。基于数字孪生和视频流系统,构建集图形、图像、视频、音频、监测监控和生产数据于一体的多媒体管控平台,实现对生产信息的相互补充及映证的管控模式;实现对工业生产现场的远程沉浸式数字巡检和灾害预警;实现对工业现场机电设备的远程控制和故障诊断。平台将提高数字孪生的表达范围和精度,实现对智能矿山、智能工厂等场所远程精准控制和沉浸式巡检及少人或无人化生产目标。

    一种面向受限空间的多视角几何场景建立方法和装置

    公开(公告)号:CN117036639A

    公开(公告)日:2023-11-10

    申请号:CN202311058030.3

    申请日:2023-08-21

    IPC分类号: G06T17/10 G06T17/05 G06T19/20

    摘要: 本发明提出一种面向受限空间的多视角几何场景建立方法,通过固定式或滑轨式图像采集设备获取多视角的受限空间内图像,经过图像编码剪枝与神经辐射场模型的迭代训练,快速还原该空间场景。首先根据受限空间的大小建立多尺度体素块对场景进行不同层次的分割。之后将采集图像的位置、位姿和图像属性信息等进行多尺度编码,其中多尺度编码与多尺度体素块相互对应。然后将二者输入神经辐射场进行颜色值与体素密度积分的循环迭代以建立立体几何场景。在迭代过程中逐级对体素块进行剪枝和精细化操作,随着体素块尺度逐渐变小,使得该方法对场景中细节区域的建模更加快速和精准。为受限空间内诸如矿山采掘工作面等工业生产环境和设备建模提供技术支持。

    一种基于时空信息对的人工智能系统

    公开(公告)号:CN118230135B

    公开(公告)日:2024-08-09

    申请号:CN202410643385.7

    申请日:2024-05-23

    IPC分类号: G06V10/94 G06T7/50 G06V10/82

    摘要: 本发明提出一种基于时空信息对的人工智能系统,通过集成部署成对的视觉、听觉和嗅觉采集设备,构建能够720度范围内采集数据的装置,实时记录设备周围环境或环境内同一空间对象的位置、形态、运动状态、声音和气味等多维度的连续时空信息对。这些信息对既包含空间关系和时钟属性,还包含丰富的标签属性,如采集设备标识,空间对象名称、类别和行为模式等。系统将同一时刻时空信息对以成对的形式组织存储和同步融合分析处理,以实现其相互印证和形成具有景深和属性标识的三维处理结果或视频流,以识别和理解场景中的时空关系和事件,为人形机器人、无人驾驶汽车、智能眼镜、巡检设备等提供人工智能软硬件系统支撑。

    基于多重特征描述符的图像特征匹配方法和装置

    公开(公告)号:CN116824183A

    公开(公告)日:2023-09-29

    申请号:CN202310841374.5

    申请日:2023-07-10

    摘要: 本发明提出一种基于多重特征描述符的图像特征匹配方法和装置,涉及图像处理和图像特征匹配领域,在图像上检测到特征点,构建多重特征描述符,完成图像的精准匹配。本发明中的多重特征描述符使用符号、均值和中心值描述符的不同排列组合方法构建而成,考虑了特征点的方向信息、数值信息和全局信息。采用滑动窗口对特征点周围所截范围内像素矩阵进行扫描,在每个窗口内提取三种特征描述符后组合拼接,生成对应的矩阵数值分布直方图和特征描述符。根据不同图像的特征描述符进行特征点匹配,选取描述符距离最近的部分特征点作为最优点进行图像匹配,使得图像匹配效果更加精准。为矿山采掘环境、场景建模、工业生产中用到的图像匹配提供技术支持。

    一种真实地理空间场景实时构建方法和实时构建装置

    公开(公告)号:CN115065816B

    公开(公告)日:2023-04-07

    申请号:CN202210499659.0

    申请日:2022-05-09

    摘要: 本发明提出一种基于全景视频技术的真实地理空间场景实时构建方法,包括在场景内安装配有姿态传感器、棱镜、麦克风和远程连接接口的若干720°全景摄像机以及5G等高性能传输和计算处理设备。利用测量机器人和姿态传感器对摄像机进行精确地理坐标和姿态标定;摄像机的安装可选择固定或架线式,固定式将同一时刻若干相邻视频进行正射校正和拼接;架线式将摄像机安装到引导装置上并可局部独立快速运动摄影,并对相邻摄像机视频实时拼接;将满足延迟时间的视频、地理坐标和环境音融合,形成场景视频流,使操作人员体验到“身临其境”的感觉,可对设备远程实时操控。为高危场景空间内,如矿井工作面、危化工厂、核电站等的少人或无人生产提供技术保障。

    一种煤矿掘进工作面巷道形变监测方法和扫描定位装置

    公开(公告)号:CN118706016A

    公开(公告)日:2024-09-27

    申请号:CN202410754801.0

    申请日:2024-06-12

    IPC分类号: G01B11/16

    摘要: 本发明公开了一种煤矿掘进工作面高精度巷道形变监测方法及装置,所述方法包括:利用全站仪和棱镜获取高精度三维激光扫描定位装置绝对大地坐标;获取巷道分段扫描的激光点云数据结果,每段中至少包含3个定位装置;以定位装置中的高反光板作为标志物拼接各段激光扫描结果,生成本次扫描巷道点云结果,将定位装置的绝对大地坐标赋予巷道扫描结果,重复上述步骤,获得不同时间的具有绝对大地坐标的巷道三维点云数据,将多期点云数据在同一绝对坐标系下进行配准,通过巷道表面点云数据,获得巷道变形数据。本发明提供了巷道激光扫描点云结果的高精度定位装置和方法,实现了井下巷道利用三维激光扫描的高精度巷道成形质量及变形监测。

    一种基于时空信息对的人工智能系统

    公开(公告)号:CN118230135A

    公开(公告)日:2024-06-21

    申请号:CN202410643385.7

    申请日:2024-05-23

    IPC分类号: G06V10/94 G06T7/50 G06V10/82

    摘要: 本发明提出一种基于时空信息对的人工智能系统,通过集成部署成对的视觉、听觉和嗅觉采集设备,构建能够720度范围内采集数据的装置,实时记录设备周围环境或环境内同一空间对象的位置、形态、运动状态、声音和气味等多维度的连续时空信息对。这些信息对既包含空间关系和时钟属性,还包含丰富的标签属性,如采集设备标识,空间对象名称、类别和行为模式等。系统将同一时刻时空信息对以成对的形式组织存储和同步融合分析处理,以实现其相互印证和形成具有景深和属性标识的三维处理结果或视频流,以识别和理解场景中的时空关系和事件,为人形机器人、无人驾驶汽车、智能眼镜、巡检设备等提供人工智能软硬件系统支撑。

    基于多重特征描述符的图像特征匹配方法和装置

    公开(公告)号:CN116824183B

    公开(公告)日:2024-03-12

    申请号:CN202310841374.5

    申请日:2023-07-10

    摘要: 本发明提出一种基于多重特征描述符的图像特征匹配方法和装置,涉及图像处理和图像特征匹配领域,在图像上检测到特征点,构建多重特征描述符,完成图像的精准匹配。本发明中的多重特征描述符使用符号、均值和中心值描述符的不同排列组合方法构建而成,考虑了特征点的方向信息、数值信息和全局信息。采用滑动窗口对特征点周围所截范围内像素矩阵进行扫描,在每个窗口内提取三种特征描述符后组合拼接,生成对应的矩阵数值分布直方图和特征描述符。根据不同图像的特征描述符进行特征点匹配,选取描述符距离最近的部分特征点作为最优点进行图像匹配,使得图像匹配效果更加精准。为矿山采掘环境、场景建模、工业生产中用到的图像匹配提供技术支持。