本发明公开了基于数字孪生的视频会议重构方法、装置及系统，实时监控采集视频会议的每个发言人的行为信号，并从行为信号中提取音频信号，基于音频信号获取时间‑音频二维空间数组；通过数字孪生技术形成匹配每个发言人的数字人，搭建视频会议虚拟场景；重构孪生音频数据，将所有发言人的时间‑音频二维空间数组按照时序依次顺次排列在孪生时间序列上，以形成一个集成所有发言人的时间‑音频孪生数组，并分区标记不同音频分段对应的发言人信息；将不同音频分段标记的发言人信息分别与每个发言人的数字人进行集成，形成孪生动态可视化的视频会议视频；本发明能够记录完整的会议内容。