用于智能机器人的多模态交互方法及系统

    公开(公告)号:CN106985137A

    公开(公告)日:2017-07-28

    申请号:CN201710137670.1

    申请日:2017-03-09

    发明人: 王鹤 张建顺

    IPC分类号: B25J9/16 B25J13/08 G06F17/27

    摘要: 本发明公开了一种用于智能机器人的多模态交互方法及系统。所述智能机器人装载有机器人操作系统,该方法包括:分句处理步骤,获取多模态数据,根据多模态数据生成待输出的语音交互数据,对所述语音交互数据对应的文本数据进行分句处理;情绪数据获取步骤,解析出各分句中包含的情绪信息,并生成下位机指令集;情绪表达步骤,将下位机指令集分发至对应模态的硬件执行部件,并控制各硬件执行部件基于分句结果执行多模态输出。本发明实施例能够使机器人对一句话中的多个情绪进行展现,使机器人更具备智能性和拟人性,满足用户需求,并且增强了智能机器人的多模态交互能力,改善了用户体验。

    用于智能机器人的多模态交互方法及系统

    公开(公告)号:CN106985137B

    公开(公告)日:2019-11-08

    申请号:CN201710137670.1

    申请日:2017-03-09

    发明人: 王鹤 张建顺

    IPC分类号: B25J9/16 B25J13/08 G06F17/27

    摘要: 本发明公开了一种用于智能机器人的多模态交互方法及系统。所述智能机器人装载有机器人操作系统,该方法包括:分句处理步骤,获取多模态数据,根据多模态数据生成待输出的语音交互数据,对所述语音交互数据对应的文本数据进行分句处理;情绪数据获取步骤,解析出各分句中包含的情绪信息,并生成下位机指令集;情绪表达步骤,将下位机指令集分发至对应模态的硬件执行部件,并控制各硬件执行部件基于分句结果执行多模态输出。本发明实施例能够使机器人对一句话中的多个情绪进行展现,使机器人更具备智能性和拟人性,满足用户需求,并且增强了智能机器人的多模态交互能力,改善了用户体验。