-
公开(公告)号:CN114200442B
公开(公告)日:2024-04-05
申请号:CN202111505998.7
申请日:2021-12-10
申请人: 合肥工业大学 , 合肥工业大学智能制造技术研究院
摘要: 本发明公开了一种于毫米波雷达与视觉的道路目标检测与关联方法,包括:1在车上安装毫米波雷达与相机;2构建改进的YOLOv3网络,包括主体网络和三个特征预测层,基于DIoU构建损失函数,训练网络,从而得到训练好的视觉检测模型;3对毫米波雷达的参数进行配置,并利用配置后的毫米波雷达采集CAN信号处理,为毫米波雷达输出目标预设长宽不同的预设框,并投影回像素坐标系下;4通过基于DIoU的代价计算方法计算雷达目标预设框与视觉目标框的代价值,并通过匈牙利算法设定合理阈值优化求解,得到全局最优匹配结果。本发明能提高毫米波雷达检测目标与视觉检测目标的关联精度,从而能获取更丰富的目标信息。
-
公开(公告)号:CN114200442A
公开(公告)日:2022-03-18
申请号:CN202111505998.7
申请日:2021-12-10
申请人: 合肥工业大学 , 合肥工业大学智能制造技术研究院
摘要: 本发明公开了一种于毫米波雷达与视觉的道路目标检测与关联方法,包括:1在车上安装毫米波雷达与相机;2构建改进的YOLOv3网络,包括主体网络和三个特征预测层,基于DIoU构建损失函数,训练网络,从而得到训练好的视觉检测模型;3对毫米波雷达的参数进行配置,并利用配置后的毫米波雷达采集CAN信号处理,为毫米波雷达输出目标预设长宽不同的预设框,并投影回像素坐标系下;4通过基于DIoU的代价计算方法计算雷达目标预设框与视觉目标框的代价值,并通过匈牙利算法设定合理阈值优化求解,得到全局最优匹配结果。本发明能提高毫米波雷达检测目标与视觉检测目标的关联精度,从而能获取更丰富的目标信息。
-
公开(公告)号:CN116310684A
公开(公告)日:2023-06-23
申请号:CN202310263222.1
申请日:2023-03-17
申请人: 合肥工业大学
IPC分类号: G06V10/80 , G06V10/82 , G06V20/64 , G06V10/764 , G06V10/766 , G06N3/045 , G06N3/048
摘要: 本发明公开了一种基于Transformer的多模态特征融合的三维目标检测方法,包括:1.使用激光雷达采集点云数据并对点云数据进行采样,同时使用摄像头采集图像数据2.将激光雷达与摄像头采集到的数据输入基于Transformer的多模态特征融合RPN网络,提取区域建议框3.将区域建议框信息输入精细化网络,得到最终预测框。本发明能避免对基于多模态特征融合的目标检测过程中,误检、漏检的问题,从而能够保证对感知环境评估的准确性。
-
公开(公告)号:CN116794637A
公开(公告)日:2023-09-22
申请号:CN202310438706.5
申请日:2023-04-23
申请人: 合肥工业大学
摘要: 本发明公开了一种激光雷达、相机、IMU联合标定装置,涉及环境感知技术领域,联合标定装置包括机架、驱动机构、顶板、采集装置,及用于驱动顶板前倾及后仰运动的倾角调整机构和用于驱动采集装置水平摆动的摆角调整机构;联合标定方法引入角度测量仪测量获得的摆臂真实摆动角度,以比例积分法校正IMU的累计误差。本发明的倾角调整机构和摆角调整机构在同一驱动机构的驱动下,带动顶板和采集装置联动运动,实现采集装置前倾、后仰运动及水平摆动运动的联动,利于拍摄角度的细节化调整和连续性保证,能便捷地实现不同角度图像的大量拍摄采集,并以不同角度拍摄采集的大量图像提高计算结果的准确率,最终实现传感器联合组件的高精度标定。
-
公开(公告)号:CN115546761A
公开(公告)日:2022-12-30
申请号:CN202211248240.4
申请日:2022-10-12
申请人: 合肥工业大学
IPC分类号: G06V20/58 , G06N3/04 , G06N3/08 , G06T3/00 , G06T3/40 , G06T5/00 , G06V10/22 , G06V10/766 , G06V10/77 , G06V10/82
摘要: 本发明公开了一种基于深度学习的车位及障碍物检测方法及其应用,该方法包括:1.在车辆相应位置安装鱼眼摄像头;2.对鱼眼摄像头进行环视拼接并进行标注,制作数据集;3.搭建神经网络结构,采用共用一个主干网络,经过特征提取网络后生成两个检测头的网络结构,分别对停车位和障碍物进行不同方式的回归;4.训练神经网络,得到最优损失下的权重,进行停车位识别。本发明避免了在采用检测框回归的方式同时检测停车位与障碍物的过程中无法拟合停车位的问题,从而保证了在准确拟合停车位的同时也能对障碍物进行有效检测识别。
-
公开(公告)号:CN115032651A
公开(公告)日:2022-09-09
申请号:CN202210630026.9
申请日:2022-06-06
申请人: 合肥工业大学
IPC分类号: G01S17/931 , G01S17/86 , G01S17/66 , G01S7/48 , G06T7/80 , G06T7/11 , G06T7/246 , G06T7/277 , G06T3/40 , G06V10/762 , G06N3/04 , G06N3/08
摘要: 本发明公开了一种基于激光雷达与机器视觉融合的目标检测方法,包括:1.在车辆相应位置安置激光雷达与相机;2.对所述激光雷达采集到的点云信息进行处理输出雷达检测框;3.对所述相机采集到的图像信息进行处理输出视觉检测框;4.对所述激光雷达和相机处理后的信息进行时空同步;5.对时空同步后的信息进行数据关联,获取关联对;6.对获取的关联对进行数据融合,并对融合的目标进行跟踪,综合连续帧目标信息输出最终融合结果。本发明能避免对基于多传感器融合的目标检测过程中,数据关联与融合过程存在大量误检、漏检的问题,从而能够保证对感知环境评估的准确性,并确保规划控制的精准执行。
-
公开(公告)号:CN115032651B
公开(公告)日:2024-04-09
申请号:CN202210630026.9
申请日:2022-06-06
申请人: 合肥工业大学
IPC分类号: G01S17/931 , G01S17/86 , G01S17/66 , G01S7/48 , G06T7/80 , G06T7/11 , G06T7/246 , G06T7/277 , G06T3/4007 , G06V10/762 , G06N3/0464 , G06N3/08
摘要: 本发明公开了一种基于激光雷达与机器视觉融合的目标检测方法,包括:1.在车辆相应位置安置激光雷达与相机;2.对所述激光雷达采集到的点云信息进行处理输出雷达检测框;3.对所述相机采集到的图像信息进行处理输出视觉检测框;4.对所述激光雷达和相机处理后的信息进行时空同步;5.对时空同步后的信息进行数据关联,获取关联对;6.对获取的关联对进行数据融合,并对融合的目标进行跟踪,综合连续帧目标信息输出最终融合结果。本发明能避免对基于多传感器融合的目标检测过程中,数据关联与融合过程存在大量误检、漏检的问题,从而能够保证对感知环境评估的准确性,并确保规划控制的精准执行。
-
公开(公告)号:CN115713656A
公开(公告)日:2023-02-24
申请号:CN202211459301.1
申请日:2022-11-17
申请人: 合肥工业大学
IPC分类号: G06V10/764 , G06V10/82 , G06N3/084 , G06V10/774 , G06V10/25 , G06N3/0464
摘要: 本发明公开了一种基于Transformer的多传感器融合目标检测方法,包括首先获取摄像头、激光雷达、毫米波雷达三传感器的原始数据,将获得的数据作为三种不同的模态输入到基于Transformer的多传感器融合网络中,其次用激光雷达源模态的特征反复强化摄像头目标模态,输出潜在适应后的新模态,然后再利用毫米波雷达源模态的特征反复强化所述的新模态特征,输出最终的融合结果,得到补充修正后的道路目标检测框。本发明能够避免车辆在行驶过程中,由于单一传感器的错检或者误检所带来的危害,从而保证为决策规划部分提供更为准确、丰富的道路目标信息。
-
-
-
-
-
-
-