发明公开
- 专利标题: 用于形式化定理证明的大模型思维链评估方法及系统
-
申请号: CN202410836289.4申请日: 2024-06-26
-
公开(公告)号: CN118709791A公开(公告)日: 2024-09-27
- 发明人: 张龙 , 张建宇 , 杨峰 , 张京京
- 申请人: 中国人民解放军军事科学院系统工程研究院
- 申请人地址: 北京市丰台区大成路13号
- 专利权人: 中国人民解放军军事科学院系统工程研究院
- 当前专利权人: 中国人民解放军军事科学院系统工程研究院
- 当前专利权人地址: 北京市丰台区大成路13号
- 代理机构: 中国和平利用军工技术协会专利中心
- 代理商 彭霜
- 主分类号: G06N5/045
- IPC分类号: G06N5/045 ; G06N5/01 ; G06N20/00
摘要:
本发明公开了一种用于形式化定理证明的大模型思维链评估方法及系统,本方法包括:构建原始数据集并训练大模型,得到训练完毕的大模型,作为基准模型;基于原始数据集,构建第一数据集、第二数据集,生成基准中间数据、第一中间数据、第二中间数据,确定基准模型的第一性能;基于所述基准注意力数据与第三注意力数据的对比结果,确定基准模型的第二性能;基于基准思维链提示数据与第四基准思维链提示数据的对比结果,确定基准模型的第三性能;基于所述第一性能、第二性能、第三性能,对所述原始数据集进行修正,得到修正后的训练集及训练方式,由修正后的训练集对所述训练完毕的大模型再次训练,得到新的训练完毕的大模型。