本发明涉及自动化管控技术领域，尤其涉及基于视频监控的楼宇安全自动化管控系统及方法。所述方法包括以下步骤：通过视频监控对楼宇进行视频图像采集并进行风险行为预测，得到风险行为数据；对楼宇图像数据集进行入侵轨迹路线生成并对楼宇图像数据集进行入侵行为心理分析并进行肢体动作频率区域关联分析并对区域电子监控器进行通信网络构建并对区域电子监控器进行监控行为训练，得到监控行为记忆数据；将监控行为记忆数据输入至云平台进行记忆训练；对楼宇图像数据集进行楼宇结构数据收集并进行意外风险策略制定，得到意外风险策略数据。本发明通过对自动化管控技术的优化处理，以实现安全自动化管控更加精确。