-
公开(公告)号:CN109298779A
公开(公告)日:2019-02-01
申请号:CN201810909949.1
申请日:2018-08-10
申请人: 济南奥维信息科技有限公司济宁分公司 , 山东大学
摘要: 本发明公开了一种基于虚拟代理交互的虚拟训练系统与方法,本发明允许用户根据自身需求或训练目标选择不同的交互类型、不同情境和不同性格特征的虚拟提问者进行面试训练,能满足多样性的焦虑情境呈现和个性化训练需求;利用3D眼镜和立体投影呈现仿真的虚拟训练环境,通过蓝牙耳机与虚拟提问者直接语音交互来实现自然、沉浸式的面试体验;在面试过程中进行多模态感知,包括动作识别、情感识别和生理状态识别,以此来更好地了解用户的面试状态。本系统不需要昂贵的虚拟现实设备,用户通过多次训练即可有效地降低焦虑,提高交流技能。
-
公开(公告)号:CN109298779B
公开(公告)日:2021-10-12
申请号:CN201810909949.1
申请日:2018-08-10
申请人: 济南奥维信息科技有限公司济宁分公司 , 山东大学
摘要: 本发明公开了一种基于虚拟代理交互的虚拟训练系统与方法,本发明允许用户根据自身需求或训练目标选择不同的交互类型、不同情境和不同性格特征的虚拟提问者进行面试训练,能满足多样性的焦虑情境呈现和个性化训练需求;利用3D眼镜和立体投影呈现仿真的虚拟训练环境,通过蓝牙耳机与虚拟提问者直接语音交互来实现自然、沉浸式的面试体验;在面试过程中进行多模态感知,包括动作识别、情感识别和生理状态识别,以此来更好地了解用户的面试状态。本系统不需要昂贵的虚拟现实设备,用户通过多次训练即可有效地降低焦虑,提高交流技能。
-
公开(公告)号:CN109634404A
公开(公告)日:2019-04-16
申请号:CN201811296072.X
申请日:2018-11-01
申请人: 济南奥维信息科技有限公司济宁分公司 , 山东大学
CPC分类号: G06F3/011 , G06K9/6256 , G06K9/6269
摘要: 本公开提供了一种基于吹气的可控交互界面的系统和方法,包括服务器端和客户端,服务器端包括训练数据采集模块,被配置为在训练阶段收集三种吹气数据作为训练数据;数据预处理模块,被配置为对获取的原始数据进行归一化和离散化操作;特征提取模块,被配置为对预处理好的数据提取特征;模型训练模块,被配置为对提取好的特征数据对分类器模型进行训练;识别模块,被配置为利用训练好的分类模型对用户的吹气进行类型识别,并将识别好的类型发送到客户端;所述客户端,被配置为检测吹气交互信号,发送给服务器端进行识别,基于从服务器端接收的吹气类型,匹配相应的交互操作。
-
公开(公告)号:CN111897416A
公开(公告)日:2020-11-06
申请号:CN202010603459.6
申请日:2020-06-29
申请人: 山东大学
摘要: 本公开提供了一种基于孪生网络的自适应吹气交互方法及系统,对采集到的原始的吹气数据进行预处理;对预处理好的数据提取特征,包括时域特征和频域特征两部分,然后将提取的多种特征封装成网格状图像帧的格式;利用训练好的孪生网络模型作为解决域自适应学习的分类器模型,根据提取的时域特征和频域特征,从吹气的强度、频率和持续时间上区分吹气类型;对吹气行为进行识别,得到交互信息。本公开使用方便、易操作、成本较低。
-
公开(公告)号:CN110806803A
公开(公告)日:2020-02-18
申请号:CN201911061261.3
申请日:2019-11-01
申请人: 山东大学
摘要: 本公开提供了、一种基于虚拟现实和多源信息融合的集成式交互系统,包括交互装置、心电监测设备和服务器,交互装置与服务器连接,被配置为提供虚拟场景和交互环境;心电监测设备采集佩戴者的心电数据,并传输给所述服务器;服务器,被配置为提供普通和VR两种环境下的交互式训练游戏、音频和视频的体验模式,提供相应的场景,以进行游戏或观赏,在训练过程中利用心电数据,实现对用户生理状态的实时监测,并形成报告,确定各场景下的用户状态,具有更加直观的视觉体验且具有更高的认知流畅性,可以提升用户的训练效能。
-
-
-
-