一种具有噪声标签的跨模态检索方法
摘要:
本发明公开了一种具有噪声标签的跨模态检索方法(MRL),该框架针对多模式噪声标签进行学习,通过输入多模态数据,其次从每个模态中随机选择若干个样本,以构建多模态微型批次,接下来通过使用其对应的模态特定映射函数来计算小批量的所有样本的表示,然后归一化群集并分别根据微型批次上的公式计算鲁棒的聚类损失和多峰对比值,然后更新网络参数,最后选择完所有样本后输出优化的网络参数。
0/0