发明公开
- 专利标题: 基于视觉的机器人到人物体传递方法、装置、介质及终端
-
申请号: CN202211272404.7申请日: 2022-10-18
-
公开(公告)号: CN115635482A公开(公告)日: 2023-01-24
- 发明人: 孟崇熙 , 张添威 , 林天麟
- 申请人: 深圳市人工智能与机器人研究院 , 香港中文大学(深圳)
- 申请人地址: 广东省深圳市龙岗区坂田街道雅宝路1号星河WORLD G2-14层;
- 专利权人: 深圳市人工智能与机器人研究院,香港中文大学(深圳)
- 当前专利权人: 深圳市人工智能与机器人研究院,香港中文大学(深圳)
- 当前专利权人地址: 广东省深圳市龙岗区坂田街道雅宝路1号星河WORLD G2-14层;
- 代理机构: 深圳市君胜知识产权代理事务所
- 代理商 朱阳波
- 主分类号: B25J9/16
- IPC分类号: B25J9/16 ; G06N3/08 ; G06T17/00 ; G06V10/82 ; G06V40/10
摘要:
本发明公开了一种基于视觉的机器人到人物体传递方法、装置、介质及终端,方法包括:将物体的预设三维模型输入到神经网络模型中进行计算,得到抓握关系信息,基于抓握关系信息计算得到抓取姿态信息;将人手的实时视频信息输入到手势识别算法中进行计算,得到人手像素点坐标,基于人手像素点坐标得到实时的三维人手网格和人手位姿信息;基于实时的三维人手网格规划运动路径,基于所述人手位姿信息判断人手的运动状态,并选择重新规划机器人的运动路径;基于机器人末端的抓取姿态信息和机器人的运动路径依次完成物体的抓取、交付和释放,将物体传递到人手中;本发明可生成最适合人手的抓取姿态,即使人手位姿改变,也可将物体准确安全的送至人手中。
公开/授权文献
- CN115635482B 基于视觉的机器人到人物体传递方法、装置、介质及终端 公开/授权日:2024-01-30
IPC分类: