公开(公告)号：CN118279569A

公开(公告)日：2024-07-02

申请号：CN202410696571.7

申请日：2024-05-31

申请人： 西南科技大学

发明人： 任珍文 ,  尤晓建 ,  周飞 ,  戴健 ,  曾刊 ,  邵延华 ,  刘歆浏

IPC分类号： G06V10/25 ,  G06V10/80 ,  G06N3/0455

摘要： 本发明公开了一种多源异构融合表征指导下的全天候快速目标识别算法，属于图像处理领域，包括统计图像信息，自适应计算出融合权重；将RGB图像和红外图像分别传入至双流网络的两个输入端进行特征提取，使用视觉Transformer模型进行融合，再将融合后的特征与多源异构环境知识的多层次语义融合特征实现注意力多尺度融合，输出不同尺度的输出结果；将输出结果进一步融合红外图像权重和RGB图像权重实现效果优化后的目标检测与识别的结果。本发明采用上述的一种多源异构融合表征指导下的全天候快速目标识别算法，设计双流网络实现多源快速目标识别，使用视觉Transformer模型获得更高效的多源融合特征；充分利用融合后的多源信息，实现网络性能和效率的平衡。