本发明公开了一种多通道全景视频实时监控方法，主要解决多通道全景视频的实时融合问题。其实现步骤是：通过摄像头或导入视频文件获取视频；然后对视频帧进行特征点提取，求得相应视频帧之间的单应性矩阵，用以描述视频通道间的坐标位置关系；接着确定多通道视频帧之间的相互位置关系，得到多通道视频帧的融合顺序；根据融合顺序选取当前待处理的两个视频帧，在两个视频帧的公共区域寻找最优拼接线，建立通道信息和像素坐标变换关系的融合查找表；根据融合查找表将多通道视频帧融合生成全景视频帧，并将得到的全景视频帧以指定的帧率进行实时显示，实现多通道全景视频的实时监控。本发明具有实时性好、可用性强和不依赖硬件的优点。