Invention Publication
- Patent Title: 一种用于测评人工智能模型的方法及系统
-
Application No.: CN202310322860.6Application Date: 2023-03-29
-
Publication No.: CN116483697APublication Date: 2023-07-25
- Inventor: 李蕾 , 黄彦浩 , 陈继林 , 田芳 , 李文臣 , 张星 , 徐得超 , 穆清 , 崔校瑞 , 程雪婷
- Applicant: 中国电力科学研究院有限公司 , 国家电网有限公司 , 国网山西省电力公司电力科学研究院
- Applicant Address: 北京市海淀区清河小营东路15号; ;
- Assignee: 中国电力科学研究院有限公司,国家电网有限公司,国网山西省电力公司电力科学研究院
- Current Assignee: 中国电力科学研究院有限公司,国家电网有限公司,国网山西省电力公司电力科学研究院
- Current Assignee Address: 北京市海淀区清河小营东路15号; ;
- Agency: 北京工信联合知识产权代理有限公司
- Agent 刘海蓉
- Main IPC: G06F11/36
- IPC: G06F11/36 ; G06Q10/0639

Abstract:
本发明公开了一种用于测评人工智能模型的方法及系统,属于人工智能技术领域。本发明方法,包括:针对目标人工智能模型的性能,确定用于测评目标人工智能模型的测试评估指标,并基于所述测试评估指标,建立用于测评目标人工智能模型的测试框架;根据测试框架及目标人工智能模型需要进行测试的测试评估指标,生成用于测评目标人工智能模型的测试策略;选择预设的测试技术,并基于测试框架通过所述测试策略对所述目标人工智能模型进行测评。本发明根据目标人工智能模型的性能,确定测试评估指标,进而根据测试评估指标制定测试框架,并基于测试框架,又给出了测试策略,基于本发明的测试策略,能够全面的测试人工智能模型的性能。
Information query