本发明公开了一种基于改进YOLOv5的GIS红外图像识别系统与方法，该系统由红外图像采集装置和GIS红外图像目标检测装置组成；红外图像采集装置采集变电站GIS红外图像，并输入至GIS红外图像目标检测装置；GIS红外图像目标检测装置内含基于改进YOLOv5的GIS红外图像识别模型，用于GIS类别检测；所述基于改进YOLOv5的GIS红外图像识别模型是在YOLOv5的基础上，引入GhostNet网络和SimAM模块进行改进。本发明可实现对于变电站复杂环境下的GIS识别，识别精度高且速度快。