发明公开
- 专利标题: 一种基于混合知识图的注意力引导增强的常识推理框架
-
申请号: CN202310044752.7申请日: 2023-01-30
-
公开(公告)号: CN116050523A公开(公告)日: 2023-05-02
- 发明人: 张鹏 , 郝楚战 , 谢明辉 , 王博 , 赵东明
- 申请人: 天津大学 , 中国移动通信集团天津有限公司
- 申请人地址: 天津市南开区卫津路92号;
- 专利权人: 天津大学,中国移动通信集团天津有限公司
- 当前专利权人: 天津大学,中国移动通信集团天津有限公司
- 当前专利权人地址: 天津市南开区卫津路92号;
- 代理机构: 天津市北洋有限责任专利代理事务所
- 代理商 韩帅
- 主分类号: G06N5/04
- IPC分类号: G06N5/04 ; G06N5/02 ; G06N3/042
摘要:
本发明提供一种基于混合知识图的注意力引导增强的常识推理框架,包括:预训练文本编码器、检索常识知识图谱模块、知识交互引导模块、常识知识聚合与传播模块和回答与解释模块;所述预训练文本编码器对一组问题q‑选项ci对进行编码表示;所述检索图谱模块根据问题和选项进行常识推理子图筛选,并将问题‑选项对的编码表示作为子图的全局节点;所述知识交互引导模块是通过将各推理子图中的问题‑选项节点提取出来,让多个推理子图的全局节点进行信息的相互传递,并获得新的问题‑选项节点的表示等步骤,本发明在常识知识聚合阶段获得了重要推理信息,同时在知识交互引导模块让推理子图中的节点感受到了非局部的信息,扩大了模型推理过程的信息源和接收域。