公开(公告)号：CN117911814A

公开(公告)日：2024-04-19

申请号：CN202211246000.0

申请日：2022-10-12

Applicant: 北京临近空间飞行器系统工程研究所

Inventor： 于雪洁 ,  薛凯 ,  宋宇光 ,  金娜 ,  薛晗庆 ,  封慧英 ,  谢放 ,  余卓阳 ,  纪祖赑 ,  文书禹 ,  严婷婷 ,  赵媛心 ,  崔彤

IPC: G06V10/80 ,  G06V10/40 ,  G06V10/20 ,  G06V10/82

Abstract: 本发明涉及人工智能与目标识别技术领域，尤其公开了一种跨模态语义对齐的零样本图像处理系统及处理方法，包括图像数据采集模块，接收嵌入式平台下不同传感器采集的图像信息，进行多路图像融合；视觉特征提取模块，利用深度卷积神经网络进行视觉特征提取得到图像视觉特征；语义信息采集模块；语义特征提取模块；跨模态语义对齐模块，利用跨模态语义对齐算法对视觉特征和语义特征进行对齐约束，建立跨模态映射关系，对新输入图像进行图像处理，输出图像目标类别和位置信息。本发明针对高空环境动态图像数据，采用多路传感器进行图像采集，设计嵌入式实时系统对图像进行快速零样本识别与检测，可高效、可靠地实现对稀缺高空图像数据的实时感知决策。