公开(公告)号：CN117746496A

公开(公告)日：2024-03-22

申请号：CN202311686675.1

申请日：2023-12-08

申请人： 广东工业大学

发明人： 刘震宇 ,  马崇润 ,  涂思龙 ,  刘泽丰 ,  何徽鸿

IPC分类号： G06V40/20 ,  G06V10/44 ,  G06V10/764 ,  G06V10/774 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/09

摘要： 本发明公开一种基于毫米波雷达的跨模态监督行人步态识别方法，包括以下步骤：采集行人的毫米波雷达信号与视频信号；逐帧对所述毫米波雷达信号进行预处理，得到行人点云序列和微多普勒特征；在所述视频信号的视觉信息监督下，利用所述行人点云序列和微多普勒特征对预设的步态识别网络模型进行训练，得到训练好的步态识别网络模型；根据所述训练好的步态识别网络模型对待识别的行人的毫米波雷达信号进行识别。本发明在基于毫米波雷达点云的行人步态识别方法的基础上，引入人体关键点检测任务，利用视觉信息对该任务进行监督，以限制步态特征空间，能够保证在行人点云较为稀疏且受噪声干扰时，步态识别网络仍能够提取有效行人步态相关特征。