发明公开
- 专利标题： 一种目标引导的多模态组合式图像检索方法及系统
-
申请号： CN202310980937.9申请日： 2023-08-04
-
公开(公告)号： CN117009571A公开(公告)日： 2023-11-07
- 发明人: 宋雪萌 , 聂礼强 , 温皓琨 , 尉寅玮 , 胡宇鹏 , 赵中州
- 申请人： 山东大学
- 申请人地址： 山东省济南市历城区山大南路27号
- 专利权人： 山东大学
- 当前专利权人： 山东大学
- 当前专利权人地址： 山东省济南市历城区山大南路27号
- 代理机构： 济南圣达知识产权代理有限公司
- 代理商 李琳
- 主分类号： G06F16/583
- IPC分类号： G06F16/583 ; G06F16/55 ; G06F18/213 ; G06F18/25 ; G06F18/241 ; G06F18/22 ; G06N3/096
摘要：
本发明属于图像信息检索技术领域，提供了一种目标引导的多模态组合式图像检索方法级系统，其方案为：包括属性特征提取模块，目标‑查询关系引导的多模态融合模块，以及目标相似度分布引导的度量学习模块。其中，属性特征提取模块可对参考图像、修改文本、以及目标图像提取统一的属性特征。而后两个模块则利用目标图像信息作为引导，分别进行多模态融合和度量学习，取得了出色的多模态组合式图像检索性能。
