本发明公开了一种电缆隐蔽工程施工缺陷自动识别系统，其框架包括：影像资料层，所述影像资料层包括由电缆隐蔽工程施工方提供的数据云端库以及由供电公司自建的隐蔽工程典型缺陷库；图像识别层，所述图像识别层基于隐蔽工程典型缺陷库建立深度学习神经网络模型并与影像资料层进行缺陷图像特征比较；结果输出层，所述结果输出层接收图像识别层输出的判断结果并用标记框将施工图像中的缺陷标出，生成识别报告。本发明利用基于神经网络算法的图像识别技术，对施工方提供的隐蔽工程施工影像进行智能识别，实现施工缺陷的自动精准识别，及时发现隐蔽工程施工缺陷，形成远程监管，有效解决了电缆隐蔽工程工艺质量缺乏监督的问题。