- 专利标题: 一种基于大模型的网络安全问答方法及系统
-
申请号: CN202411159160.0申请日: 2024-08-22
-
公开(公告)号: CN118964581A公开(公告)日: 2024-11-15
- 发明人: 张健 , 李廷 , 姜建彪 , 霍宇
- 申请人: 浪潮云信息技术股份公司
- 申请人地址: 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼
- 专利权人: 浪潮云信息技术股份公司
- 当前专利权人: 浪潮云信息技术股份公司
- 当前专利权人地址: 山东省济南市高新区浪潮路1036号浪潮科技园S01号楼
- 代理机构: 北京集佳知识产权代理有限公司 11227专利代理师林招师
- 主分类号: G06F16/332
- IPC分类号: G06F16/332 ; G06N3/088 ; G06N3/09 ; G06N5/04
摘要:
本申请公开了一种基于大模型的网络安全问答方法及系统,所述方法包括:获取用户输入的网络安全问题;将网络安全问题输入预先训练好的大模型中,由大模型基于目标网络安全知识库,分析得到网络安全问题的答案;其中,先利用无监督训练数据集对大模型进行继续预训练,再基于监督微调策略,利用有监督训练数据集对大模型进行二次迭代训练,最后基于人类反馈强化学习策略,将大模型与训练好的奖励模型相结合,对大模型进行第三次迭代训练,得到训练好的大模型;奖励模型利用标注数据集训练得到;标注数据集通过对大模型输出的结果进行优劣标注得到;无监督训练数据集由多个数据源的网络安全数据组成;将网络安全问题的答案反馈给用户。