公开(公告)号：CN118609173A

公开(公告)日：2024-09-06

申请号：CN202411089728.6

申请日：2024-08-09

Applicant: 南京信息工程大学

Inventor： 张国庆 ,  孙文馨 ,  江露 ,  刘天奇 ,  郑晨 ,  郑钰辉 ,  董仕豪 ,  王准 ,  杨艳

IPC: G06V40/10 ,  G06V10/143 ,  G06V10/40 ,  G06V10/74 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/084

Abstract: 本发明提出了一种基于中间模态学习的跨模态行人重识别方法及系统。其中，行人重识别方法包括如下步骤：获取成对的可见光原始图像和红外原始图像；提取可见光原始图像、红外原始图像的中间模态，得到可见光中间模态、红外中间模态；通过空间注意力和通道注意力优化所述可见光原始图像、红外原始图像、可见光中间模态、红外中间模态，输出优化结果；建立损失约束限制所述优化结果，输出识别结果。本发明提出了一个主要由中间模态图片生成器、双重注意力组合块以及特征损失约束组成的中间模态学习网络，具有精度高、还原度高的特点。