发明授权
- 专利标题: 一种机器人采摘果实的视觉引导方法
-
申请号: CN202210443989.8申请日: 2022-04-26
-
公开(公告)号: CN114902872B公开(公告)日: 2023-04-21
- 发明人: 郑润森 , 邓晓燕 , 李昌昊 , 李爵煜 , 王柏畅 , 韦炯光
- 申请人: 华南理工大学
- 申请人地址: 广东省广州市天河区五山路381号
- 专利权人: 华南理工大学
- 当前专利权人: 华南理工大学
- 当前专利权人地址: 广东省广州市天河区五山路381号
- 代理机构: 广州市华学知识产权代理有限公司
- 代理商 黄卫萍
- 主分类号: A01D46/30
- IPC分类号: A01D46/30 ; G06V20/68 ; G06V20/10 ; G06V10/145 ; G06V10/147 ; G06V10/26 ; G06V10/82 ; G06T7/70 ; G06T1/00
摘要:
本发明公开了一种机器人采摘果实的视觉引导方法,涉及图像识别和处理技术领域。该方法步骤如下:通过Realsense D435i传感器获取RGB图像和深度图像;使用目标检测神经网络对RGB图像中的果实进行识别和定位,截取检测框区域作为ROI图像;对深度图像检测框中果实表面块状分布的数据进行分割,实现实例分割的效果,获得果实的掩膜图像;基于球坐标系偏微分求解掩膜图像和深度图像中果实表面各点的法向量;求解果实采摘位置和姿态,为机器人进行采摘操作时提供目标果实的位置和姿态;发送位置和姿态信息给机械臂机器人,控制机械臂运动规划实现采摘任务。本发明对机器人视觉引导采摘水果任务实现一套完整有效的解决办法。
公开/授权文献
- CN114902872A 一种机器人采摘果实的视觉引导方法 公开/授权日:2022-08-16