发明公开
- 专利标题: 一种具有噪声标签的跨模态检索方法
-
申请号: CN202110486095.2申请日: 2021-04-30
-
公开(公告)号: CN115269956A公开(公告)日: 2022-11-01
- 发明人: 胡鹏 , 彭德中 , 彭玺 , 余城诚 , 王骞
- 申请人: 四川大学
- 申请人地址: 四川省成都市武侯区一环路南一段24号
- 专利权人: 四川大学
- 当前专利权人: 四川大学
- 当前专利权人地址: 四川省成都市武侯区一环路南一段24号
- 主分类号: G06F16/9532
- IPC分类号: G06F16/9532 ; G06F16/958 ; G06N3/04
摘要:
本发明公开了一种具有噪声标签的跨模态检索方法(MRL),该框架针对多模式噪声标签进行学习,通过输入多模态数据,其次从每个模态中随机选择若干个样本,以构建多模态微型批次,接下来通过使用其对应的模态特定映射函数来计算小批量的所有样本的表示,然后归一化群集并分别根据微型批次上的公式计算鲁棒的聚类损失和多峰对比值,然后更新网络参数,最后选择完所有样本后输出优化的网络参数。