本发明的一种基于视频分析的调度监控方法和系统，采集变电站的所有状态的视频以及图像，基于卷积神经网络进行变电站设备视频信息进行特征提取，进行特征压缩和索引生成，存储至变电站设备信息数据库；提取已存储的视频目标分类检索特征，基于变电站设备视频及图像进行多源异构数据信息融合模型的构建；获取基于卷积神经网络的视频图像状态识别结果，提取变电站设备的状态运行信息，构建变电站设备状态标准库；基于构建的多源异构数据信息融合模型和变电站设备状态标准库，导入变电站设备的监控接口，进行变电站设备的实时监控。本发明通过构建多源异构数据信息融合模型，建立变电站设备监控体系，提升变电站安全运行水平和设备运维效率。