发明公开
- 专利标题: 基于对比特征融合的情感识别方法、装置、设备及介质
-
申请号: CN202310371911.4申请日: 2023-04-06
-
公开(公告)号: CN116682462A公开(公告)日: 2023-09-01
- 发明人: 焦爽 , 陈光辉 , 袁世通 , 周旭战 , 江鹏宇 , 秦铭阳 , 张明明 , 张璜 , 马仁婷
- 申请人: 中国大唐集团科学技术研究院有限公司中南电力试验研究院
- 申请人地址: 河南省郑州市自贸试验区郑州片区(郑东)明理路56号中原金融产业园13号楼
- 专利权人: 中国大唐集团科学技术研究院有限公司中南电力试验研究院
- 当前专利权人: 中国大唐集团科学技术研究院有限公司中南电力试验研究院
- 当前专利权人地址: 河南省郑州市自贸试验区郑州片区(郑东)明理路56号中原金融产业园13号楼
- 代理机构: 北京思创大成知识产权代理有限公司
- 代理商 张立君
- 主分类号: G10L25/63
- IPC分类号: G10L25/63 ; G06F18/25 ; G06F18/213
摘要:
本申请公开了一种基于对比特征融合的情感识别方法、装置、设备及介质。该方法可以包括:分别提取语音单模态特征与表情单模态特征;通过对比学习提取语音单模态特征与表情单模态特征的共享信息,获取对比损失函数;通过正交约束提取语音单模态特征与表情单模态特征的特定信息,获得正交损失函数;根据共享信息与特有信息,进行情感分类,获得总损失函数;通过最小化总损失函数,获得最终的情感分类。本发明有效地提取和融合了语音和表情模态之间的共享信息和特有信息。