本发明提供结构外挂装饰板防脱落机器视觉自动监测方法及系统。所述方法通过在目标结构物四周布设监控摄像头，实时采集监控区域图像，对采集图像进行预处理并提取颜色矩特征，基于颜色矩特征进行第一次孤立森林异常检测算法检测并定位异常图像；将异常图像隔离后提取异常图像的空间特征，再对异常图像的空间特征进行第二次孤立森林算法检测；对处于危险阶段的结构外挂装饰板进行预警，并结合人工现场确认的方式对结构外挂装饰板进行监测维护。本发明对正常样本特征进行自动学习，不需要人为干预，鲁棒性强，不受环境因素的影响，能够实时监测结构外挂装饰板的状态，从而保障结构周边行人和工作人员的人身安全。