发明公开
- 专利标题: 一种基于跨模态多层次特征融合的电力设备检测方法
-
申请号: CN202311282583.7申请日: 2023-10-07
-
公开(公告)号: CN117350964A公开(公告)日: 2024-01-05
- 发明人: 邹文杰 , 从阔晨 , 范波 , 李亲
- 申请人: 安徽大学
- 申请人地址: 安徽省合肥市蜀山区九龙路111号安徽大学磬苑校区
- 专利权人: 安徽大学
- 当前专利权人: 安徽大学
- 当前专利权人地址: 安徽省合肥市蜀山区九龙路111号安徽大学磬苑校区
- 代理机构: 芜湖启腾专利代理事务所
- 代理商 胡建豪
- 主分类号: G06T7/00
- IPC分类号: G06T7/00 ; G06T7/73 ; G06V10/40 ; G06V10/80 ; G06V10/82 ; G06N3/045 ; G06N3/0464 ; G06N3/084
摘要:
本发明公开一种基于跨模态多层次特征融合的电力设备检测方法,包括以下步骤:构建双流特征提取网络,提取可见光图像和红外图像的多层级目标表征,引入自适应融合模块捕捉可见光和红外分支模态下的互补特征,利用自注意力机制增强互补特征的表达能力并构建目标的深层表示,利用不同尺度下的融合特征捕获目标区域并实现目标的精确定位;本发明可以很好的捕捉可见光图像和红外图像的深层次特征,实现不同模态的互补融合,进行变电站实际场景的目标检测,利用目标检测的结果进行优化,可以实现可见光图像特征和红外图像特征的自适应融合和特征增强,能够有效地实现跨模态信息的融合,精确定位和识别变电站电力设备目标,并展现出较高的鲁棒性。