- 专利标题: 虚拟对象唇形驱动方法、模型训练方法、相关装置及电子设备
-
申请号: CN202111261314.3申请日: 2021-10-28
-
公开(公告)号: CN113971828B公开(公告)日: 2023-10-31
- 发明人: 张展望 , 胡天舒 , 洪智滨 , 徐志良
- 申请人: 北京百度网讯科技有限公司
- 申请人地址: 北京市海淀区上地十街10号百度大厦2层
- 专利权人: 北京百度网讯科技有限公司
- 当前专利权人: 北京百度网讯科技有限公司
- 当前专利权人地址: 北京市海淀区上地十街10号百度大厦2层
- 代理机构: 北京银龙知识产权代理有限公司
- 代理商 刘念
- 主分类号: G06V40/16
- IPC分类号: G06V40/16 ; G06V10/774 ; G06V10/766 ; G06V10/74
摘要:
本公开提供了一种虚拟对象唇形驱动方法、模型训练方法、相关装置及电子设备,涉及计算机视觉、深度学习等人工智能技术领域。具体实现方案为:获取语音片段和虚拟对象的目标脸部图像数据;将所述语音片段和所述目标脸部图像数据输入至第一目标模型执行第一唇形驱动操作,得到所述虚拟对象在所述语音片段驱动下的第一唇形图像数据;其中,所述第一目标模型基于第一模型和第二模型训练得到,所述第一模型为针对唇形图像数据的唇音同步判别模型,所述第二模型为针对唇形图像数据中唇部区域的唇音同步判别模型。
公开/授权文献
- CN113971828A 虚拟对象唇形驱动方法、模型训练方法、相关装置及电子设备 公开/授权日:2022-01-25