本发明涉及一种基于保护装置模型文件的自动测试方法、装置及系统，由于从装置ICD(IED能力描述文件)模型文件中可以获悉保护型号、保护功能配置和保护定值的最大值和最小值，因此在仅有ICD模型文件的条件下离线就可以自动生成保护定值精度试验、动作时间、定值有效性等常规试验项目的测试用例模板；对于现场运行的装置，通过装置在线读取装置配置文件获取设备参数定值和保护定值，导入自动测试用例模板，自动生成测试用例。因此不仅大大缩短测试用例的制作周期，提高测试效率，而且降低人为干预因素导致的定值输入等错误。