一种基于毫米波雷达和视觉的道路目标检测与关联方法

    公开(公告)号:CN114200442B

    公开(公告)日:2024-04-05

    申请号:CN202111505998.7

    申请日:2021-12-10

    IPC分类号: G01S13/86 G01S7/41

    摘要: 本发明公开了一种于毫米波雷达与视觉的道路目标检测与关联方法,包括:1在车上安装毫米波雷达与相机;2构建改进的YOLOv3网络,包括主体网络和三个特征预测层,基于DIoU构建损失函数,训练网络,从而得到训练好的视觉检测模型;3对毫米波雷达的参数进行配置,并利用配置后的毫米波雷达采集CAN信号处理,为毫米波雷达输出目标预设长宽不同的预设框,并投影回像素坐标系下;4通过基于DIoU的代价计算方法计算雷达目标预设框与视觉目标框的代价值,并通过匈牙利算法设定合理阈值优化求解,得到全局最优匹配结果。本发明能提高毫米波雷达检测目标与视觉检测目标的关联精度,从而能获取更丰富的目标信息。

    一种基于毫米波雷达和视觉的道路目标检测与关联方法

    公开(公告)号:CN114200442A

    公开(公告)日:2022-03-18

    申请号:CN202111505998.7

    申请日:2021-12-10

    IPC分类号: G01S13/86 G01S7/41

    摘要: 本发明公开了一种于毫米波雷达与视觉的道路目标检测与关联方法,包括:1在车上安装毫米波雷达与相机;2构建改进的YOLOv3网络,包括主体网络和三个特征预测层,基于DIoU构建损失函数,训练网络,从而得到训练好的视觉检测模型;3对毫米波雷达的参数进行配置,并利用配置后的毫米波雷达采集CAN信号处理,为毫米波雷达输出目标预设长宽不同的预设框,并投影回像素坐标系下;4通过基于DIoU的代价计算方法计算雷达目标预设框与视觉目标框的代价值,并通过匈牙利算法设定合理阈值优化求解,得到全局最优匹配结果。本发明能提高毫米波雷达检测目标与视觉检测目标的关联精度,从而能获取更丰富的目标信息。

    一种激光雷达、相机、IMU联合标定装置及方法

    公开(公告)号:CN116794637A

    公开(公告)日:2023-09-22

    申请号:CN202310438706.5

    申请日:2023-04-23

    IPC分类号: G01S7/497 G01C25/00 G06T7/80

    摘要: 本发明公开了一种激光雷达、相机、IMU联合标定装置,涉及环境感知技术领域,联合标定装置包括机架、驱动机构、顶板、采集装置,及用于驱动顶板前倾及后仰运动的倾角调整机构和用于驱动采集装置水平摆动的摆角调整机构;联合标定方法引入角度测量仪测量获得的摆臂真实摆动角度,以比例积分法校正IMU的累计误差。本发明的倾角调整机构和摆角调整机构在同一驱动机构的驱动下,带动顶板和采集装置联动运动,实现采集装置前倾、后仰运动及水平摆动运动的联动,利于拍摄角度的细节化调整和连续性保证,能便捷地实现不同角度图像的大量拍摄采集,并以不同角度拍摄采集的大量图像提高计算结果的准确率,最终实现传感器联合组件的高精度标定。

    基于Transformer的多传感器融合目标检测方法

    公开(公告)号:CN115713656A

    公开(公告)日:2023-02-24

    申请号:CN202211459301.1

    申请日:2022-11-17

    摘要: 本发明公开了一种基于Transformer的多传感器融合目标检测方法,包括首先获取摄像头、激光雷达、毫米波雷达三传感器的原始数据,将获得的数据作为三种不同的模态输入到基于Transformer的多传感器融合网络中,其次用激光雷达源模态的特征反复强化摄像头目标模态,输出潜在适应后的新模态,然后再利用毫米波雷达源模态的特征反复强化所述的新模态特征,输出最终的融合结果,得到补充修正后的道路目标检测框。本发明能够避免车辆在行驶过程中,由于单一传感器的错检或者误检所带来的危害,从而保证为决策规划部分提供更为准确、丰富的道路目标信息。