一种机器人视觉语言导航的动作自适应方法和系统

    公开(公告)号:CN118832572A

    公开(公告)日:2024-10-25

    申请号:CN202410784417.5

    申请日:2024-06-18

    申请人: 同济大学

    摘要: 本发明涉及一种机器人视觉语言导航的动作自适应方法和系统,包括:确定机器人可行动作空间数值范围,并生成随机动作;基于随机动作与环境交互所得变化,利用机器人动作影响自编码模块得到动作嵌入向量;基于动作嵌入向量,对比数据集中特定动作并计算差异,确定当前执行动作及对应的语义含义;基于确定性的动作与环境交互所得,利用交叉模态注意力特征提取模块,得到机器人视觉语言多模态特征;基于机器人视觉语言多模态特征,作为扩散策略决策模块条件,迭代推理出机器人下一步执行动作;对机器人状态进行更新,直至到达目标结束本次导航任务。与现有技术相比,本发明具有增强机器人动作自适应的鲁棒性和准确性等优点。

    一种基于多维赛博空间的移动智能体数字孪生系统

    公开(公告)号:CN112115607B

    公开(公告)日:2024-04-26

    申请号:CN202010970455.1

    申请日:2020-09-16

    申请人: 同济大学

    摘要: 本发明涉及一种基于多维赛博空间的移动智能体数字孪生系统,具体包括以下结构:物理空间试验场,为移动智能体测试提供运动空间作为简易物理测试环境;赛博空间运维系统,根据物理空间试验场,进行数据采集融合处理,利用VR技术、集合实体建模技术和多学科联合仿真技术构建的多维映射赛博空间的运行载体;高通量数据传输信道,为赛博空间运维系统与物理空间试验场的信息流交互提供多输入多输出数据传输通道;虚实多维空间可视化系统,提供移动智能体试验测试过程的可视化推演及人机交互。与现有技术相比,本发明具有多对一的虚实交互孪生测试能力,提升了移动智能体试验的泛化能力、强化了试验测试结果的同时降低了试验研发成本等优点。

    一种针对地下弱光弱纹理环境下的结构语义地图构建方法

    公开(公告)号:CN116912440A

    公开(公告)日:2023-10-20

    申请号:CN202310857462.4

    申请日:2023-07-12

    申请人: 同济大学

    摘要: 本发明涉及计算机视觉三维建模技术领域,特别是指一种针对地下弱光弱纹理环境下的结构语义地图构建方法,该方法包括:融合传统方法与Transfomer的结构语义参数化线条检测与验证模型;建立根据结构信息方向引导的几何基元半平面搜索方法;建立基于几何基元模型的邻域贪婪扩张算法;逐个几何基元位姿与边界优化;点云地图与结构信息融合,建立融合几何结构基元的语义地图。采用本发明,不需要人工干预能建立弱光弱纹理环境下多种地下空间三维立体地图,且对于管线,立柱,楼梯等规则物体建立完整CAD可操作模型,在城市地下管廊、地铁地下隧道等多种弱光弱纹理环境下具有重要的应用价值,能解决人工建模周期长,弱纹理、弱光照下三维建模精度低等问题。

    面向组合导航系统的导航定位方法及装置

    公开(公告)号:CN116774263A

    公开(公告)日:2023-09-19

    申请号:CN202310694378.5

    申请日:2023-06-12

    申请人: 同济大学

    摘要: 本发明提供一种面向组合导航系统的导航定位方法及装置,在该方法中,包括:基于惯导系统确定针对导航目标的第一导航定位信息,以及基于GPS系统确定针对导航目标的第二导航定位信息;GPS系统包含实时动态GPS模块和激光雷达模块;基于惯导系统的导航参数误差模型构建针对滤波模型的状态方程,以及基于惯导系统与GPS系统所输出的定位信息的偏差构建针对滤波模型的量测方程,滤波模型以导航参数误差作为状态量;基于滤波模型,确定对应量测信息的导航参数误差;滤波模型采用强跟踪卡尔曼滤波算法;基于导航参数误差,校正第一导航定位信息。由此,通过增量式自适应强跟踪卡尔曼滤波方法进行工作,实现高精度导航定位信息。

    一种基于区块链的多节点跳变路径循迹与测试方法及装置

    公开(公告)号:CN116723141A

    公开(公告)日:2023-09-08

    申请号:CN202310784240.4

    申请日:2023-06-29

    申请人: 同济大学

    摘要: 本发明提供一种基于区块链的多节点跳变路径循迹与测试方法及装置,所述方法包括:在区块链网络中选取出一个父节点,剩下的所有节点作为子节点,所有子节点订阅父节点从而获得所需信息;所有子节点一方面维护自身节点的信息,另一方面还维护与之相邻的子节点的信息,并将自身所拥有的全部信息发布至父节点进行注册;在区块链网络中,确定起始节点与终端节点,针对中间节点进行节点间的跳变路径循迹规划;在各个中间节点部署网关模组,对经过该节点的输入信号、输出信号进行记录,从而针对所选择的节点路径进行分析,保证多节点跳变路径循迹的可靠性。本发明可实现多节点跳变路径循迹规划,并可保证多节点跳变路径循迹的可靠性。

    面向地下快速目标探测的多智能体分布式感知融合系统

    公开(公告)号:CN116682005A

    公开(公告)日:2023-09-01

    申请号:CN202310601790.8

    申请日:2023-05-25

    申请人: 同济大学

    摘要: 本发明提供一种面向地下快速目标探测的多智能体分布式感知融合系统,属于多智能体分布式感知融合领域。所述系统包括:类复眼数据采集模块,用于利用搭载多类传感器并模仿昆虫视觉系统的多智能体,迅速感知地下空间数据;其中,所述多类传感器包括:惯性传感器、具有复眼镜头的视觉传感器和具有复眼透镜的红外传感器,获取的地下空间数据包括:多智能体的状态以及地下快速目标图像;分布式感知数据融合模块,用于利用分布式感知数据融合策略对类复眼数据采集模块感知的地下空间数据进行空间维度和时间维度的融合,得到地下快速目标探测的全局信息地图。采用本发明,能够很大程度上提高地下快速目标探测效率。