本发明公开了一种反馈运动补偿残差信息的视频传输系统及方法，远端接收机信宿在反向信道上反馈接收到的运动补偿残差离散余弦变换系数量化信息和运动矢量，发送端的本地解码器使用反馈来的运动补偿残差离散余弦变换系数量化信息刷新本地重建帧，使本地解码器重建帧和远端信宿视频解码器重建帧一致，可以充分利用较空闲的反向信道提高视频传输的质量和抗信道干扰的能力，有效抑制误码扩散，对整个通信系统的正向信道容量影响较小。在本发明中，正向传送和反向反馈数据都以视频块或宏块为单位，以保证帧间运动补偿预测中的重建帧更新实时性。