公开(公告)号：CN118276681A

公开(公告)日：2024-07-02

申请号：CN202410370713.0

申请日：2024-03-29

申请人： 深圳幻影未来信息科技有限公司

发明人： 王聪 ,  陈国峰 ,  姜龙 ,  陈亮 ,  梁东耀 ,  任文龙 ,  王玉雪 ,  赖明峥 ,  王惠捷

IPC分类号： G06F3/01 ,  G06F9/4401 ,  G06T13/40 ,  G06V40/16 ,  G06N3/008 ,  G06N3/0442 ,  G06N3/0464 ,  G06N3/09 ,  G10L17/24 ,  G10L15/22

摘要： 本发明涉及虚拟人交互一体机，其特征在于，包括：显示装置，所述显示装置为竖式大屏；多模态传感器，多模态传感器设置在所述显示装置上；存储装置，所述存储装置包括长期存储装置和短期存储装置，所述长期存储装置为数据库，所述数据库包括关系型数据库和向量数据库，所述短期存储装置为内存；处理装置，用于处理虚拟人和用户的互动数据，所述处理装置安装在所述显示装置的背面。虚拟人交互一体机能实现在特定的环境下虚拟人与用户的实时自然语言交流，配合虚拟数字人的脸部表情、动作和职业装扮，达到提升虚拟数字人与现实场景融合的技术效果。

公开(公告)号：CN118535005A

公开(公告)日：2024-08-23

申请号：CN202410370711.1

申请日：2024-03-29

申请人： 深圳幻影未来信息科技有限公司

发明人： 王聪 ,  陈国峰 ,  姜龙 ,  陈亮 ,  梁东耀 ,  任文龙 ,  王玉雪 ,  赖明峥 ,  王惠捷

IPC分类号： G06F3/01 ,  G06F9/4401 ,  G06T13/40 ,  G06V40/16 ,  G06N3/008 ,  G06N3/09 ,  G06N3/092 ,  G10L15/22 ,  G10L15/26 ,  G10L17/02 ,  G10L25/24 ,  G10L25/45

摘要： 本发明涉及一种虚拟数字人的交互方法、装置及存储介质，其中方法包括：虚拟数字人开机后进入待机状态，等待接收唤醒信号后进入唤醒流程，切换到工作状态，所述唤醒流程包括语音唤醒流程和视觉唤醒流程；基于虚拟数字人的多模态传感器，获取环境信息和用户信息；基于大语言提示词工程，虚拟数字人与用户进行交互；基于大语言模型的提示词工程预设的人物设定，将虚拟数字人换装。能实现在特点环境下虚拟人与用户的实时自然语言交流，配合虚拟数字人的脸部表情、动作和职业装扮，达到提升虚拟数字人与现实场景融合的技术效果。