公开(公告)号：CN118298227A

公开(公告)日：2024-07-05

申请号：CN202410394831.5

申请日：2024-04-02

Applicant: 东南大学

Inventor： 王晨 ,  刘发麒 ,  周威

IPC: G06V10/764 ,  G06V40/20 ,  G06V20/58 ,  G06V10/82 ,  G06V10/80 ,  G06T7/246 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/0442

Abstract: 本发明涉及一种基于行人特性和人车交互的行人意图检测方法、装置及存储介质，其中方法包括：获取车载摄像设备的行车记录视频；对行车记录视频进行人物检测，得到行人检测结果；对得到的行人检测结果提取行人关键点，并保存关键点提取过程中的关键点热力图；基于提取的行人关键点分别确定各行人的速度；将提取的行人关键点输入至第一特征提取网络得到用于表征各行人运动状态分类结果的第一行为特征；将关键点热力图输入至第二特征提取网络得到第二行为特征；将第一行为特征和第二行为特征拼接得到行人行为特征；对行车记录视频分别进行场景分割和深度估计，得到场景分割图和深度估计图，并将场景分割图和深度估计图拼接后输入至第三特征提取网络得到行车记录视频每帧的人车交互特征；将行人检测结果、行人的速度、行人行为特征结合对应帧的人车交互特征输入至意图分类网络得到行人横穿马路意图检测结果。与现有技术相比，本发明具有检测准确性高等优点。