发明公开
- 专利标题: 一种结合知识蒸馏与对比学习的情感增强继续训练方法
-
申请号: CN202310712211.7申请日: 2023-06-15
-
公开(公告)号: CN117115505A公开(公告)日: 2023-11-24
- 发明人: 毋立芳 , 邢乐豪 , 石戈 , 邓斯诺 , 李雪芬
- 申请人: 北京工业大学
- 申请人地址: 北京市朝阳区平乐园100号
- 专利权人: 北京工业大学
- 当前专利权人: 北京工业大学
- 当前专利权人地址: 北京市朝阳区平乐园100号
- 代理机构: 北京思海天达知识产权代理有限公司
- 代理商 刘萍
- 主分类号: G06V10/764
- IPC分类号: G06V10/764 ; G06V10/82 ; G06V10/774 ; G06F16/435 ; G06F40/30 ; G06N3/0495 ; G06N3/082 ; G06N3/0895 ; G06N3/0455 ; G06N3/0464
摘要:
一种结合知识蒸馏与对比学习的情感增强继续训练方法属于计算机视觉领域。首先利用现有文本情感分类模型及情感字典筛选得到大量具有明显情感倾向的图文对中组成大规模情感图文对数据集;然后应用大规模情感图文对数据集对教师网络进行训练,为了获得泛化性强的教师网络,使用情感自然语言监督方式,同时通过挖掘监督信号中的多粒度情感信息并融入到图片表征中,以增强视觉编码器的情感表达能力;将得到的教师网络视觉模块初始化学生网络同时可以为学生网络提供伪标签数据,并设计任务对学生模型进行针对训练进一步挖掘图片中细节情感信息;将学生网络应用至下游图像情感分类任务。本发明解决进行情感分析模型预测精确度较低以及适用性差的问题。