本发明公开了一种跨越围栏行为识别方法及系统，该系统包括前端信息采集抓拍子系统、网络传输子系统和后端平台子系统；前端信息采集抓拍子系统包括违章行为识别模块；网络传输子系统包括违章行为导入模块和违章行为上传模块；后端平台子系统包括违章行为报警模块和违章行为处理模块。本发明与现有技术相比，开发了一套人员跨越围栏行为识别系统和方法，其能够有效、准确、实时的对作业现场的人员跨越围栏行为进行识别，并且具备识别后报警提醒以及违章行为处理功能，从而极大的减少了施工现场跨越围栏行为的发生，对安全防护的监管更加智能和高效，可以快速及时的发现安全隐患，有效的起到监管作用，保障了企业和个人的生命、财产安全。