一种针对深度学习模型的评测系统
Abstract:
本发明提供一种针对深度学习模型的评测系统,包括用户操作模块,其用于获取模型和数据集测试请求;业务处理模块,其用于完成模型和数据集的测试,管理测试任务、变异策略和数据集;测试引擎模块,其用于自动适配模型训练框架类型、自动选择变异策略以及动态生成对抗样本;数据存储模块,其用于实现对所述模型信息、数据集信息和测试报告信息的存储;测试引擎模块包括AI框架单元、变异单元、对抗样本单元、数据增强单元、神经元覆盖单元。本发明提供的针对深度学习模型的评测系统,通过在测试引擎模块中设置各个测试单元,实现测试过程通用化和自动化,测试指标齐全,极大地简化了测试过程并提高了测试效率。
Public/Granted literature
Patent Agency Ranking
0/0