- 专利标题: 面向跨场景的机器人视觉模仿学习方法及系统
-
申请号: CN202010241696.2申请日: 2020-03-31
-
公开(公告)号: CN111300431B公开(公告)日: 2021-04-23
- 发明人: 张伟 , 杨硕 , 鲁威志 , 王贺升 , 李贻斌
- 申请人: 山东大学
- 申请人地址: 山东省济南市历下区经十路17923号
- 专利权人: 山东大学
- 当前专利权人: 山东大学
- 当前专利权人地址: 山东省济南市历下区经十路17923号
- 代理机构: 济南圣达知识产权代理有限公司
- 代理商 李圣梅
- 主分类号: B25J9/16
- IPC分类号: B25J9/16 ; B25J13/08 ; B25J19/04
摘要:
本公开公开了面向跨场景的机器人视觉模仿学习方法及系统,将给定来自原始语境的观察图像转换为预测的目标观察图像,即将视觉演示从演示者的语境转换到机器人所在语境,完成语境转换;基于初始深度观察图像来预测目标深度观察图像;针对获取到多模态的初始观察和目标观察,使用深度神经网络来构建逆动态模型,利用逆动态模型来输出预测动作,完成模仿学习。本公开语境转换模块负责将来自不同语境的视觉演示转换到机器人所在语境。本公开多模态逆动态模型负责将多模输入映射为动作来复现演示中动作,以颜色和深度观察信息作为输入,并将其映射为动作,从而实现根据演示进行模仿。
公开/授权文献
- CN111300431A 面向跨场景的机器人视觉模仿学习方法及系统 公开/授权日:2020-06-19
IPC分类: