一种基于单目视觉的机械臂抓取履带板方法

    公开(公告)号:CN117274398A

    公开(公告)日:2023-12-22

    申请号:CN202311212022.X

    申请日:2023-09-19

    申请人: 河海大学

    IPC分类号: G06T7/80 G06T7/70

    摘要: 本发明公开了一种基于单目视觉的机械臂抓取履带板方法,该方法包括:根据履带板平面与相机坐标系的关系以及缩放比例等条件来创建带标定的可变形模板;采集当前工作时的垛料图片,基于缩放系数和预设的ROI区域计算垛料图片中的匹配查找区域,与所述带标定的可变形模板进行匹配,获得所有可抓取履带板位姿,最后根据抓取空间坐标系与相机坐标系关系,和履带板平面与相机坐标系关系,对得到的履带板位姿进行坐标系转换,得到履带板在抓取坐标系中的位姿。本发明通过将所有坐标系统一至抓取空间坐标系中,从而对整个视觉装置进行简化,避免了相机与机械臂之间坐标系的直接转换。

    一种针对畸变量估算的目标位姿定位方法及系统

    公开(公告)号:CN117252922A

    公开(公告)日:2023-12-19

    申请号:CN202310947248.8

    申请日:2023-07-31

    申请人: 河海大学

    IPC分类号: G06T7/73 G06T7/80

    摘要: 本发明公开了一种针对畸变量估算的目标位姿定位方法及系统,包括:对设定的标定板B0进行单目标定获得畸变系数κ0;通过平移向量和旋转矩阵对各标定板B0的位姿[R0T0]进行单目位姿迭代,基于像素坐标(x0,y0)计算标定板Bk对应的实际畸变系数κk,建立畸变量空间动态模型;对目标物体的像素点坐标(x,y)代入畸变量空间动态模型进行插值,计算出像素点坐标(x,y)对应的畸变系数值κ;将畸变系数值κ代入位姿检测算法计算所述目标物体对应的位姿结果;本发明能够改善视觉测量中畸变系数带来的误差问题,提升视觉测量精度。

    一种基于靶标标定定位模型的智能控制方法及系统

    公开(公告)号:CN116766202A

    公开(公告)日:2023-09-19

    申请号:CN202310904298.8

    申请日:2023-07-21

    申请人: 河海大学

    IPC分类号: B25J9/16

    摘要: 本发明公开了一种基于靶标标定定位模型的智能控制方法及系统,包括:利用辅相机、主相机和标定执行机构的标靶获取执行机构末端在主相机下的位姿#imgabs0#获取目标零件在主相机下的位姿#imgabs1#所述执行机构通过法兰安装于机械臂末端;根据所述位姿#imgabs2#和位姿#imgabs3#计算获得目标零件在螺丝批下位姿;基于目标零件在螺丝批下位姿、螺丝批在机械臂的法兰下的位姿以及法兰在基准坐标系下的位姿建立所述目标零件在基准坐标系下的坐标模型;根据目标零件在基准坐标系下的坐标模型控制机械臂动作,并带动执行机构对目标零件进行加工;简化机械臂的控制过程,同时避免了受环境因素的限制。

    一种针对可变形医学靶标的识别方法及装置

    公开(公告)号:CN115359467A

    公开(公告)日:2022-11-18

    申请号:CN202210889792.7

    申请日:2022-07-27

    申请人: 河海大学

    IPC分类号: G06V20/60 G06V10/40 G06V10/74

    摘要: 本发明提供了一种针对可变形医学靶标的识别方法及装置,用于存在部分遮挡、杂波以及非线性照度变化的情况下在图像中检测可变形的医学靶标。公开了一种用于可变形医学靶标检测的综合方法,该方法结合了:基于模型点的归一化梯度方向的匹配度量、将模型分解成部分的分解以及将针对所有部分的所有搜索结果同时加以考虑的搜索方法的优点。尽管靶标模型被分解成子部分,但是用来在最高金字塔级搜索的模型的相关尺寸并没有减小。因此,本发明没有现有技术方法中所存在的数目减小的金字塔级的速度限制。最后,提高了医学靶标在变形情况下的识别准确率与速度,提高了手术精准入针点定位。