一种基于机器视觉的多功能智能导盲手杖

    公开(公告)号:CN113208883A

    公开(公告)日:2021-08-06

    申请号:CN202110640462.X

    申请日:2021-06-08

    摘要: 本发明公开了一种基于机器视觉的多功能智能导盲手杖,包括手杖本体,手杖本体上设置有第一超声波模块、第二超声波模块、第三超声波模块、摄像头模块、语音播报模块和处理器,第一超声波模块、第二超声波模块和第三超声波模块分别用于探测手杖前方、左方和右方障碍物距离手杖的距离;摄像头模块用于实时采集环境图像;处理器用于将摄像头模块采集的环境图像输入红绿灯识别模型中,输出红绿灯识别结果;还用于将障碍物距离手杖的距离与预设安全距离进行比较,得到避障结果;还用于根据红绿灯识别结果以及避障结果控制语音播报模块进行语音导航提醒。本发明在导盲功能方面的安全性有了极大的提升,能够引导盲人安全的进行社会活动,维护盲人的安全。

    一种跨模态矫正融合机器人抓取检测方法及系统

    公开(公告)号:CN117140516A

    公开(公告)日:2023-12-01

    申请号:CN202311188577.5

    申请日:2023-09-14

    IPC分类号: B25J9/16

    摘要: 本发明公开了一种跨模态矫正融合机器人抓取检测方法及系统,构建基于边缘引导的跨模态矫正融合抓取检测模型;收集抓取数据集用于模拟生产线环境,建立Xauat‑Grasping单目标抓取数据集;对公开数据集和Xauat‑Grasping单目标抓取数据集进行数据增强,并划分训练集和测试集;利用训练集对跨模态矫正融合抓取检测模型进行训练,利用测试集在真实场景下进行测试,利用测试完的跨模态矫正融合抓取检测模型实现跨模态矫正融合机器人抓取检测。在保证抓取实时性的同时提升了抓取精度,并在复杂环境下具有非常强的鲁棒性。