- 专利标题: 一种多模态数字人社交属性控制方法及相关装置
-
申请号: CN202311144505.0申请日: 2023-09-05
-
公开(公告)号: CN116883608B公开(公告)日: 2023-12-12
- 发明人: 姜明华 , 曹家诚 , 余锋 , 刘莉 , 周昌龙 , 宋坤芳
- 申请人: 武汉纺织大学
- 申请人地址: 湖北省武汉市洪山区纺织路1号
- 专利权人: 武汉纺织大学
- 当前专利权人: 武汉纺织大学
- 当前专利权人地址: 湖北省武汉市洪山区纺织路1号
- 代理机构: 武汉信诚嘉合知识产权代理有限公司
- 代理商 马林红
- 主分类号: G06T17/00
- IPC分类号: G06T17/00 ; G06T13/40 ; G06Q50/00
摘要:
本申请提供一种多模态数字人社交属性控制方法及相关装置,所述控制方法包括以下步骤:S1:采集人体特征的多模态数据,所述多模态数据包括人体3D数据、红外数据和语音数据;S2:将所述多模态数据输入多模态数字人社交属性控制模型进行处理,得到数字人的社交属性信息参数;其中所述多模态数字人社交属性控制模型姿态行为分析模块、语音识别模块和变分交互式语义分析模块;S3:根据所述数字人社交属性信息参数控制数字人的交互。本申请采用多模态数字人社交属性控制模型提高了数字人的交互社交的真实性,使数字人自适应地根据计算处理设备性能指数调整对话生成时间的上界,使数字人的交互更加流畅、自然。
公开/授权文献
- CN116883608A 一种多模态数字人社交属性控制方法及相关装置 公开/授权日:2023-10-13
IPC分类:
G | 物理 |
G06 | 计算;推算或计数 |
G06T | 一般的图像数据处理或产生 |
G06T17/00 | 用于计算机制图的3D建模 |