本发明公开基于视觉感知的驾驶风险预警装置及方法。本发明通过在汽车的四个方向安装若干摄像头实时采集车辆行驶过程中车辆周边环境的视频，并通过深度学习的算法计算出自身车辆的行驶风险类型和周边运动车辆的风险等级。本发明可以同时利用实时系统的实时性对当前深度卷积神经网络的模型进行实时切换，在保证风险驾驶行为预测的准确性和实时性的基础上，有效的避免了计算资源的浪费。本发明可以通知感知周围车辆的驾驶行为风险和本车的驾驶行为风险，为车辆动态风险的预测提供了更全面的信息。