-
公开(公告)号:CN114564602A
公开(公告)日:2022-05-31
申请号:CN202210262736.0
申请日:2022-03-17
申请人: 北京达佳互联信息技术有限公司 , 山东大学
IPC分类号: G06F16/435 , G06F40/216 , G06F16/45 , G06K9/62
摘要: 本公开关于一种多媒体资源的标签构建方法、装置、电子设备、计算机可读存储介质以及计算机程序产品,其中方法通过获取待构建标签的多媒体资源,从多个多媒体中确定目标标签集,并根据目标标签集中任一标签对所对应的多媒体,获取标签对的统计特征,进而根据标签对的统计特征确定标签对的关系类别,最后根据每个标签对的关系类别构建多媒体资源的标签体系。以实现基于待构建标签的多媒体资源进行标签的挖掘以及标签体系的构建,从而提高了定义标签的准确性及效率。
-
公开(公告)号:CN113239219B
公开(公告)日:2022-05-20
申请号:CN202110516225.2
申请日:2021-05-12
申请人: 山东大学 , 河钢数字技术股份有限公司
IPC分类号: G06F16/532 , G06F16/535 , G06F16/583 , G06N3/04
摘要: 本发明提供了一种基于多模态查询的图像检索方法、系统、介质及设备,对参考图像、目标图像和修改文本进行编码,得到图像和文本的局部和全局中间表示;图像和文本的局部中间表示进行细粒度局部组合,图像和文本的全局中间表示经过细粒度全局组合,将局部网络和全局网络进行互学习增强,将局部和全局的参考图像修改表示进行融合,局部和全局的目标图像表示进行相似的融合操作,根据融合之后二者的相似度为依据检索到对应的目标图像,有助于提高图像检索的准确性。
-
公开(公告)号:CN110391010B
公开(公告)日:2022-05-13
申请号:CN201910502406.2
申请日:2019-06-11
申请人: 山东大学
摘要: 本发明公开了一种基于个人健康感知的食品推荐方法及系统,所述方法包括以下步骤:确定可选的食材种类,基于食谱数据集进行食谱检索;获取与用户健康有关的文本信息,根据所述文本信息进行健康状况预测,得到用户健康画像;基于检索到的食谱和用户健康画像为用户推荐食谱。本发明能够推荐符合用户健康状态的食谱。
-
公开(公告)号:CN113065012B
公开(公告)日:2022-04-22
申请号:CN202110288644.5
申请日:2021-03-17
申请人: 山东省人工智能研究院 , 山东大学
摘要: 一种基于多模态动态交互机制的图文解析方法,提出了一个动态模态交互建模框架用于解决图文检索问题,该框架不仅能够涵盖现有方法的交互模式,还能够自动学习其他未被探索到的模式。为了赋予模型充分的模态交互能力,从不同角度、不同粒度设计了四种基础的交互模块,其有效解决了模态内推理和模态间对齐两大图文检索中的核心挑战。为了动态地学习模态交互模式,在每个交互模块中整合了一个动态路由器。通过提出的语义一致性正则化技术对路径决策过程进行了合理的、强有力的约束,确保了模型路径学习的高效性。在进行图像和文本之间的相互检索时准确度大幅度提高。
-
公开(公告)号:CN113239219A
公开(公告)日:2021-08-10
申请号:CN202110516225.2
申请日:2021-05-12
申请人: 山东大学 , 河钢数字技术股份有限公司
IPC分类号: G06F16/532 , G06F16/535 , G06F16/583 , G06N3/04
摘要: 本发明提供了一种基于多模态查询的图像检索方法、系统、介质及设备,对参考图像、目标图像和修改文本进行编码,得到图像和文本的局部和全局中间表示;图像和文本的局部中间表示进行细粒度局部组合,图像和文本的全局中间表示经过细粒度全局组合,将局部网络和全局网络进行互学习增强,将局部和全局的参考图像修改表示进行融合,局部和全局的目标图像表示进行相似的融合操作,根据融合之后二者的相似度为依据检索到对应的目标图像,有助于提高图像检索的准确性。
-
公开(公告)号:CN108897823B
公开(公告)日:2020-03-17
申请号:CN201810645528.2
申请日:2018-06-21
申请人: 山东大学
IPC分类号: G06F16/9535 , G06N3/04
摘要: 本发明公开了一种基于深度学习注意力机制的个性化商品检索方法及装置。其中,该方法包括:构建基于注意力机制的短期偏好模型;构建基于注意力机制的长期偏好模型;查询再表示;查询再表示的过程为:融合基于注意力机制的短期偏好模型、基于注意力机制的长期偏好模型以及当前查询,通过多层全连接网络来学习三者之间的交互关系,得到重组的查询表示,并采用一个距离函数来界定所有商品与当前查询的相关程度;训练所述多层全连接网络结束后,对每个用户提交的新查询,得到所有商品与当前查询的距离值,再将所有距离值从高到低进行排序,并将前n个距离值对应的商品返回给用户,其中,n为正整数。
-
公开(公告)号:CN110807477A
公开(公告)日:2020-02-18
申请号:CN201910993603.9
申请日:2019-10-18
申请人: 山东大学
摘要: 本公开公开了基于注意力机制的神经网络服装搭配方案生成方法及系统,构建基于注意力机制的神经网络模型;构建训练集;将训练集输入到已构建的基于注意力机制的神经网络模型中,对基于注意力机制的神经网络模型进行训练,当模型的损失函数收敛时,停止训练,输出训练好的基于注意力机制的神经网络模型;获取待搭配的上衣;获取已有的若干件下衣;将待搭配的上衣和已有的若干件下衣,均输入到训练好的基于注意力机制的神经网络模型中,输出与待搭配的上衣所匹配的下衣;最终,待搭配的上衣与匹配的下衣作为最佳穿衣搭配方案输出。
-
公开(公告)号:CN109993154B
公开(公告)日:2020-02-07
申请号:CN201910319860.4
申请日:2019-04-19
申请人: 山东大学 , 智洋创新科技股份有限公司 , 国网浙江省电力有限公司
摘要: 本发明公开一种变电站单指针式六氟化硫型仪表智能识别方法。本发明旨在对特殊的单指针式六氟化硫型仪表进行读数识别。利用深度学习与传统计算机视觉技术相结合的方式,进行仪表盘定位与指针特征识别。并针对实际应用存在的光线阴暗与仪表盘畸变情形,加入图像增强模块与畸变处理模块以提升识别效果。本发明实现了在复杂背景下对单指针式六氟化硫型仪表的自动检测和识别任务,并具有良好的准确率与稳定性,可满足变电站实际应用需求。
-
公开(公告)号:CN108681610B
公开(公告)日:2019-12-10
申请号:CN201810523697.9
申请日:2018-05-28
申请人: 山东大学
IPC分类号: G06F16/332 , G06N3/04
摘要: 本发明公开了生成式多轮闲聊对话方法、系统及计算机可读存储介质,分为两个阶段:阶段一:利用语料库的对话,对多轮闲聊对话模型进行训练;阶段二:将用户提出的待答复的问题输入到训练好的多轮闲聊对话模型中,输出实际答复。通过挖掘对话历史中的关键词、在模型中引入注意力机制,将对话历史中的所有词区别对待,扩大了历史对话中关键词在生成回复时的作用。通过宽度通道来预测关键词拓宽话题,通过深度通道来预测历史对话中关键词的权重,以此来深入当前话题,将两部分得到的话题信息引入解码器中辅助解码,话题信息的引导有效地解决了无意义回复的问题,大大减少了无意义回复的数量。
-
公开(公告)号:CN110391010A
公开(公告)日:2019-10-29
申请号:CN201910502406.2
申请日:2019-06-11
申请人: 山东大学
摘要: 本发明公开了一种基于个人健康感知的食品推荐方法及系统,所述方法包括以下步骤:确定可选的食材种类,基于食谱数据集进行食谱检索;获取与用户健康有关的文本信息,根据所述文本信息进行健康状况预测,得到用户健康画像;基于检索到的食谱和用户健康画像为用户推荐食谱。本发明能够推荐符合用户健康状态的食谱。
-
-
-
-
-
-
-
-
-