本发明公开了一种面向AI芯片平台的分布式自动化软件测试方法及平台。该平台可以通过服务器将AI软件测试任务自动化的分发给不同的AI芯片平台客户端计算机去运行，测试完成后将测试结果统一到服务器管理，然后根据需求自动发布环境更新任务并随后向X86客户端发起第二次相同的测试任务，该任务在X86客户端上进行纯软件运行，并统一收集管理第二次的测试结果。当两次测试工作结束后，会自动的对两次的测试结果进行对比分析，并输出分析结果；并且，对前后两次离线模型的改变进行追溯，定位离线模型的结点或者输入导致错误，帮助软件工程师和硬件工程师排查问题。