动作视频的生成方法、扩散模型的训练方法和设备
摘要:
本公开提供了一种动作视频的生成方法、扩散模型的训练方法和设备,属于计算机技术领域。所述方法包括:获取目标音频对应的图像噪声数据和目标音频相关数据,目标音频相关数据包括目标音频或目标音频的音频特征数据;将目标音频相关数据和图像噪声数据输入训练完成的扩散模型,以使扩散模型基于目标音频相关数据对图像噪声数据进行图像去噪还原处理,得到目标音频对应的预测动作数据;基于目标音频和预测动作数据,生成目标音频对应的动作视频。采用本公开,提高了预测动作数据与目标音频的匹配度,提高了生成的动作视频的完整性。
0/0