一种实时识别手势的手语智能交互设备及其交互方法

    公开(公告)号:CN107798964A

    公开(公告)日:2018-03-13

    申请号:CN201711184055.2

    申请日:2017-11-24

    申请人: 郑军

    IPC分类号: G09B21/00 G06K9/00 G06T13/00

    摘要: 本发明公开了一种实时识别手势的手语智能交互设备,它包括网络电视、处理器、显示器和摄像头,所述处理器包括获取单元、处理单元、编辑单元和解码单元,所述获取单元用于获取网络电视的音频信息和观看者手语手势的图像信息和深度信息;所述处理单元用于将所述音频信息转化为文本信息;所述编辑单元用于区分所述音频信息的不同声源,并根据所述声源利用虚拟人物手语编辑技术编辑相应的虚拟人物手语动画;所述解码单元用于将所述图像信息和深度信息进行解码处理转化为文本信息。本发明可帮助聋哑人理解电机节目,也可帮助聋哑人与电视节目的沟通。