公开(公告)号：CN117349792B

公开(公告)日：2024-06-07

申请号：CN202311391539.X

申请日：2023-10-25

申请人： 中国人民解放军空军军医大学

发明人： 武圣君 ,  刘旭峰 ,  王秀超 ,  王卉 ,  方鹏 ,  谢康宁 ,  李国新 ,  胡敏花 ,  杨梦圆 ,  张芫蓓 ,  蒲昭君

IPC分类号： G06F18/25 ,  G06F18/241 ,  G06F18/23213 ,  G06V40/16 ,  G06V10/82 ,  G06N3/0499 ,  G06N3/084 ,  G10L25/63 ,  G10L25/45 ,  G10L25/24 ,  G10L25/30

摘要： 本发明公开一种基于面部特征与语音特征的情绪识别方法，涉及特征融合技术领域，包括：对采集的包含有面部信号和语音信号的音视频进行分帧，提取每帧的语音特征值和面部特征值；根据情绪种类构建K均值聚类数目集，从K均值聚类数目集合中确定最优聚类数目；使用最优聚类数目kbest把语音特征值和面部特征值聚为不同的簇，将既含有面部特征值也含有语音特征值的簇作为融合特征；将融合特征输入到情绪识别模块中，输出情绪识别结果。本发明引入k均值算法对表情特征和语音特征进行融合，将不同感知模式的信息融合，有助于捕捉模态之间的互补信息。将该类作为情绪识别模型的输入有助于情绪识别模型输出更准确的情绪识别结果。

公开(公告)号：CN117349792A

公开(公告)日：2024-01-05

申请号：CN202311391539.X

申请日：2023-10-25

申请人： 中国人民解放军空军军医大学

发明人： 武圣君 ,  刘旭峰 ,  王秀超 ,  王卉 ,  方鹏 ,  谢康宁 ,  李国新 ,  胡敏花 ,  杨梦圆 ,  张芫蓓 ,  蒲昭君

IPC分类号： G06F18/25 ,  G06F18/241 ,  G06F18/23213 ,  G06V40/16 ,  G06V10/82 ,  G06N3/0499 ,  G06N3/084 ,  G10L25/63 ,  G10L25/45 ,  G10L25/24 ,  G10L25/30

摘要： 本发明公开一种基于面部特征与语音特征的情绪识别方法，涉及特征融合技术领域，包括：对采集的包含有面部信号和语音信号的音视频进行分帧，提取每帧的语音特征值和面部特征值；根据情绪种类构建K均值聚类数目集，从K均值聚类数目集合中确定最优聚类数目；使用最优聚类数目kbest把语音特征值和面部特征值聚为不同的簇，将既含有面部特征值也含有语音特征值的簇作为融合特征；将融合特征输入到情绪识别模块中，输出情绪识别结果。本发明引入k均值算法对表情特征和语音特征进行融合，将不同感知模式的信息融合，有助于捕捉模态之间的互补信息。将该类作为情绪识别模型的输入有助于情绪识别模型输出更准确的情绪识别结果。

公开(公告)号：CN221308205U

公开(公告)日：2024-07-12

申请号：CN202322687110.7

申请日：2023-10-08

申请人： 中国人民解放军空军军医大学

发明人： 杨梦圆 ,  武圣君 ,  刘旭峰 ,  李新红 ,  李玙 ,  张芫蓓 ,  蒲昭君

IPC分类号： A61B5/16 ,  F16M11/18 ,  F16M13/02 ,  F16M11/28 ,  F16M11/08

摘要： 本实用新型涉及心理评估检测技术领域，特别是涉及一种可调节的面部表情采集设备，包括座椅和检测盘，所述座椅顶部设置有检测盘，所述检测盘内开设有导轨，所述导轨内滑动连接有滑块，所述滑块顶端表面设置有螺纹杆，所述螺纹杆上螺纹连接有螺母，所述滑块底端表面设置有活动仓，所述活动仓内滑动连接有连接杆，所述连接杆底端表面设有面部表情识别设备；通过设置的活动仓和连接杆、面部表情识别设备、弹簧槽、弹簧、定位块和限位槽，能够便于工作人员根据患者的身高来对面部表情识别设备的位置进行调整，使面部表情识别设备能够适用于不同身高的患者，以便于面部表情识别设备能够一直抓捕到患者面部的表情，从而提高了装置的适用性。