本发明公开一种基于计算机视觉的轨道变形监测系统，包括，传感网络、区域节点、本地监测模块、云平台；传感网络与本地监测模块通过区域节点进行连接，本地监测模块与云平台连接；传感网络用于获取轨道监测数据；本地监测模块用于通过提取识别模型对轨道监测数据进行特征提取及识别，生成轨道变形数据；云平台用于存储轨道监测数据及轨道变形数据，并对识别模型进行更新。通过上述技术方案，本发明能够有效采集大范围轨道监测数据，同时对轨道进行监测过程中，提升轨道变形监测的识别效率及有效性。