发明公开
- 专利标题: 一种面向旋转合成孔径计算成像的序列图像融合方法
-
申请号: CN202311025961.3申请日: 2023-08-15
-
公开(公告)号: CN117058058A公开(公告)日: 2023-11-14
- 发明人: 智喜洋 , 孙钰 , 江世凯 , 胡建明 , 巩晋南 , 张伟
- 申请人: 哈尔滨工业大学
- 申请人地址: 黑龙江省哈尔滨市南岗区西大直街92号
- 专利权人: 哈尔滨工业大学
- 当前专利权人: 哈尔滨工业大学
- 当前专利权人地址: 黑龙江省哈尔滨市南岗区西大直街92号
- 代理机构: 哈尔滨龙科专利代理有限公司
- 代理商 李智慧
- 主分类号: G06T5/50
- IPC分类号: G06T5/50 ; G06V10/40 ; G06V10/62 ; G06V10/80 ; G06V10/82 ; G06N3/0464 ; G06N3/045
摘要:
本发明公开了一种面向旋转合成孔径计算成像的序列图像融合方法,所述方法立足于旋转合成孔径光学遥感系统成像机理,提出基于视觉Transformer的端到端图像融合网络。时空信息提取模块中的帧内自注意力计算,可更为有效地处理遥感图像中不同尺度的物体的信息。同时使用帧间互注意力替代显式的对准模块,可自适应地捕捉不同帧中相近位置的像素之间的关联,并减少伪影的产生。融合网络的时空信息融合模块中使用视觉滑动窗口Transformer模块,通过Transformer本身强大的建模能力对时域信息进行充分融合,能够充分利用低质量图像序列中的额外信息,为旋转合成孔径系统的实际在轨应用提供特性先验与数据输入。