多模态信息检索方法、装置、设备、可读存储介质及计算机程序产品

    公开(公告)号:CN117909555A

    公开(公告)日:2024-04-19

    申请号:CN202410169465.3

    申请日:2024-02-06

    摘要: 本申请公开了一种多模态信息检索方法、装置、设备、可读存储介质及计算机程序产品,借助多模态大模型的能力精准理解用户复杂细致且丰富多样的检索意图,满足用户真实场景下复杂的检索意图。通过训练使得多模态大模型具备将不同模态的信息映射至同一语义向量空间的能力,通过双塔模型结构中的第一多模态大模型对用户请求进行特征编码得到查询向量表示,通过第二多模态大模型对各条候选信息分别进行特征编码得到每条候选信息的向量表示,筛选与查询向量表示匹配的候选信息作为检索结果,实现跨模态信息的检索,相比于现有技术的检索结果准确度更高。

    语义信息提取方法、装置、设备及存储介质

    公开(公告)号:CN115600608A

    公开(公告)日:2023-01-13

    申请号:CN202211407747.X

    申请日:2022-11-10

    IPC分类号: G06F40/30 G06F40/211

    摘要: 本申请提出一种语义信息提取方法、装置、设备及存储介质,该方法包括:从目标语句中提取得到语义要素,并确定各个语义要素之间的关系信息;其中,所述语义要素包括实体要素和意图要素,所述关系信息包括句法关系信息、时空关系信息、句间关系信息和指代关系信息;基于各个语义要素,以及各个语义要素之间的关系信息,生成与所述目标语句对应的语义信息。采用上述的语义信息提取方法,能够全面、准确地提取目标语句的语义信息。

    知识图谱构建方法、装置、电子设备及存储介质

    公开(公告)号:CN115687651A

    公开(公告)日:2023-02-03

    申请号:CN202211384778.8

    申请日:2022-11-07

    发明人: 杨磊 刘权

    摘要: 本公开提供了一种知识图谱构建方法、装置、电子设备及存储介质,涉及自然语言处理技术领域。该方法包括解析文本数据,生成文本数据的抽象语义表示抽象语义表示图;根据抽象语义表示图,抽取文本数据中的第一实体和第一实体关系,第一实体和第一实体关系之间具有对应关系;根据第一实体和第一实体关系,构建三元组;对三元组进行校验;若三元组通过校验,则根据三元组,构建目标知识图谱。本公开实施例能够在无需人工标注的样本数据参与的前提下,构建出具有高准确性的知识图谱,不仅提升了知识图谱的构建效率,还可节省大量人工成本。

    情感交互方法及装置、情感交互模型的训练方法及装置

    公开(公告)号:CN114444510A

    公开(公告)日:2022-05-06

    申请号:CN202111604541.1

    申请日:2021-12-24

    摘要: 本发明提供了一种情感交互方法及装置、情感交互模型的训练方法及装置。该情感交互方法包括:利用情感分析模型对历史交互信息进行情感分析,获取历史交互信息对应的情感信息,其中,情感信息包括情感类别;基于历史交互信息和情感信息,利用策略确定模型确定当前回复信息需要采用的情感交互策略;基于历史交互信息和情感交互策略,利用回复生成模型生成当前回复信息,能够使对话系统具备情感交互能力,促进对话系统与用户的深入交流。