-
公开(公告)号:CN114565119A
公开(公告)日:2022-05-31
申请号:CN202111412999.7
申请日:2021-11-25
申请人: 天津市测绘院有限公司 , 天津大学
摘要: 本发明公开了一种基于多模态图卷积网络的时尚兼容度预测方法,进行服饰单品的多模态信息的挖掘利用;利用服饰属性信息作为高级语义并融合视觉信息引导类别子空间生成,通过动态图卷积网络进行多模态特征数据之间的交互融合;加入自注意机制模块将标题文本特征引入到多模态融合中,最终将服饰单品的多模态特征表示通过时尚兼容度预测器获得服饰套装的兼容度分数。与现有技术相比,本发明通过充分利用服饰单品的视觉、文本及属性等多模态信息,构建时尚兼容度预测器实现兼容度分数的精确计算;为解决时尚兼容度预测问题提供了新的方法思路,有效地增强特征表示能力,保证多模态特征的一致性和完备性。
-
公开(公告)号:CN114565119B
公开(公告)日:2023-09-26
申请号:CN202111412999.7
申请日:2021-11-25
申请人: 天津市测绘院有限公司 , 天津大学
IPC分类号: G06V10/764 , G06N3/0464 , G06V10/774 , G06V10/80 , G06V10/82
摘要: 本发明公开了一种基于多模态图卷积网络的时尚兼容度预测方法,进行服饰单品的多模态信息的挖掘利用;利用服饰属性信息作为高级语义并融合视觉信息引导类别子空间生成,通过动态图卷积网络进行多模态特征数据之间的交互融合;加入自注意机制模块将标题文本特征引入到多模态融合中,最终将服饰单品的多模态特征表示通过时尚兼容度预测器获得服饰套装的兼容度分数。与现有技术相比,本发明通过充分利用服饰单品的视觉、文本及属性等多模态信息,构建时尚兼容度预测器实现兼容度分数的精确计算;为解决时尚兼容度预测问题提供了新的方法思路,有效地增强特征表示能力,保证多模态特征的一致性和完备性。
-
公开(公告)号:CN115359287A
公开(公告)日:2022-11-18
申请号:CN202210949935.9
申请日:2022-08-09
申请人: 天津大学 , 天津市测绘院有限公司
摘要: 本发明公开了一种基于深度矩阵分解的短视频多标签分类方法,该方法以深度矩阵分解为基本框架,通过深度矩阵分解中各层参数矩阵和潜在表征矩阵挖掘隐藏在短视频和标签之中的高级语义特征,通过编解码的思想强化潜在表征矩阵的表达能力;通过逆矩阵分析的方法将标签关联性信息在源端嵌入到短视频内容中,最后通过监督约束项引导参数矩阵和潜在表征矩阵的学习。与现有技术相比,本发明能从短视频中学习到复杂的结构化和层次化的有效信息,有效地挖掘短视频高级语义特征和标签关联性的短视频多标签分类方法。
-
公开(公告)号:CN115346132A
公开(公告)日:2022-11-15
申请号:CN202210965803.5
申请日:2022-08-12
申请人: 天津市测绘院有限公司 , 天津大学
摘要: 本发明公开了一种多模态表示学习的遥感图像异常事件检测方法及装置,方法包括:利用多粒度语义联合表示网络中的属性加权模块和相似度匹配模块学习视觉语义属性信息与文本内容模态信息之间的联合表示;利用视觉增强的语义私有表示网络增强私有视觉表示和私有文本内容表示,获得模态私有域增强表示;融合联合表示和模态私有域增强表示得到遥感图像的增强表示,并输入到分类器中实现遥感图像异常事件检测;利用分类损失、差异性损失和重建损失进行训练与模型学习,通过学习后的模型实现对遥感图像的异常事件检测。装置包括:处理器和存储器。本发明充分利用了遥感图像的多种模态信息实现了高效、准确的遥感图像异常事件检测。
-
公开(公告)号:CN116740113B
公开(公告)日:2024-08-09
申请号:CN202310899295.X
申请日:2023-07-21
申请人: 天津市测绘院有限公司
摘要: 本发明提出一种基于包络约束的SAR图像目标轮廓生成方法及系统,输入待生成目标轮廓的SAR图像Iin;对所述SAR图像Iin建立具有包络约束的SAR图像目标轮廓生成模型;对所述具有包络约束的SAR图像目标轮廓生成模型进行子问题分解,求解所述包络约束;基于所述包络约束的求解结果,进行迭代求解生成SAR图像目标轮廓。本发明根据目标的包络约束信息,对轮廓生成模型设置约束条件,从而可以正确的生成SAR图像的目标轮廓。
-
公开(公告)号:CN116740113A
公开(公告)日:2023-09-12
申请号:CN202310899295.X
申请日:2023-07-21
申请人: 天津市测绘院有限公司
摘要: 本发明提出一种基于包络约束的SAR图像目标轮廓生成方法及系统,输入待生成目标轮廓的SAR图像Iin;对所述SAR图像Iin建立具有包络约束的SAR图像目标轮廓生成模型;对所述具有包络约束的SAR图像目标轮廓生成模型进行子问题分解,求解所述包络约束;基于所述包络约束的求解结果,进行迭代求解生成SAR图像目标轮廓。本发明根据目标的包络约束信息,对轮廓生成模型设置约束条件,从而可以正确的生成SAR图像的目标轮廓。
-
-
-
-
-