本发明涉及视频编解码领域，公开了一种时分复用的复合视频广播信号解码装置及方法。本发明中，通过信号切换控制器产生的用于周期性切换信号通道的控制信号，指示信号选择器在多个通道的模拟CVBS信号中，选择当前待处理的通道的CVBS信号，并对当前待处理的通道的CVBS信号进行解码，得到亮度信号和两个色差信号，使得本发明实施方式以现有的单路复合视频广播信号解码装置的为基础，增加一些时分复用的控制逻辑，分时的使用解码数据通路，不增加数据通路的实现代价，而仅仅增加一些控制通路，实现多路复合视频广播信号同时解码，大大降低了成本，在复合视频广播信号数字化解码领域有着很好的应用。