公开(公告)号：CN117131933A

公开(公告)日：2023-11-28

申请号：CN202311119806.8

申请日：2023-08-31

申请人： 华中师范大学

发明人： 刘海 ,  张昭理 ,  杨雪雪 ,  邸昂 ,  刘新 ,  邢师珍 ,  郑媛 ,  刘婷婷 ,  李友福

IPC分类号： G06N5/022 ,  G06N5/04 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/047 ,  G06N3/048 ,  G06N3/042 ,  G06N3/0442 ,  G06N3/08 ,  G06F18/2415 ,  G06F18/25 ,  G06F16/36 ,  G06F16/45 ,  G06F16/483

摘要： 本申请公开了一种多模态知识图谱建立方法，包括：采集多门学科的开源文本知识图谱和目标文本知识图谱并提取结构特征、视觉特征和文本特征；将所述开源文本知识图谱与目标文本知识图谱融合并处理不一致信息，得到多模态知识图谱；采集学习者的交互信息并抽取实体和关系，得到交互信息的头实体嵌入表示、尾实体嵌入表示和关系嵌入表示，以将交互信息转换为三元组形式；构建目标知识的预训练语言模型学习多模态知识图谱，并对输入的三元组形式的交互信息给出反馈信息。其可以解决传统基于单一的学科知识构建学科知识图谱的方式跨学科学习效果差，导致利用学科知识图谱进行知识信息检索、智能问答的学习过程效率低下的问题。

公开(公告)号：CN117591799A

公开(公告)日：2024-02-23

申请号：CN202311122713.0

申请日：2023-08-30

申请人： 华中师范大学

发明人： 刘海 ,  张昭理 ,  黄小吉 ,  刘攀 ,  欧景斌 ,  杨雪雪 ,  邸昂 ,  刘婷婷 ,  李友福

IPC分类号： G06F18/10 ,  G06F18/25 ,  G06Q10/0639 ,  G06Q50/20 ,  G06N3/0455 ,  G06N3/048 ,  G06N3/08

摘要： 本申请公开了一种多模态自监督在线教学数据评测方法，包括：采集教师在线上教学的同一时间段中包括教学视频片段、音频信号以及文本资源的多模态数据；对多模态数据进行预处理，使其成为大小相同的令牌序列作为网络模型的原始信号；将预处理后的多模态数据馈送到网络模型中，获取待检测主体的多模态投影头，然后将其映射到不同的公共空间；分别对视频‑音频对和视频‑文本对计算目标损失，将两者目标损失融合得到整体样本目标，对教师的行为进行预测，得到教学质量预测结果。其可以解决传统教学评测中评测方法单一，存在误判、漏判，难以准确地反应教师线上教学质量的问题。

公开(公告)号：CN117033559A

公开(公告)日：2023-11-10

申请号：CN202311130601.X

申请日：2023-08-31

申请人： 华中师范大学

发明人： 刘海 ,  张昭理 ,  刘攀 ,  欧景斌 ,  杨雪雪 ,  邸昂 ,  刘新 ,  刘婷婷 ,  李友福

IPC分类号： G06F16/33 ,  G06N3/0442 ,  G06N3/0464 ,  G06N3/08 ,  G06Q50/20

摘要： 本发明公开了一种基于跨领域的自适应习题适配方法，包括：分别获取学生在线学习系统中的至少两门不同学科的学习数据，其中一门作为源数据域，另一门作为目标数据域；选择所述源数据域中与所述目标数据域中相似的问题文本；根据选择出的所述源数据域中的问题文本和所述目标数据域中的问题文本构建知识状态评估模型；根据所述知识状态评估模型评估对应学生的知识状态，并根据所述知识状态获取对应的适配习题；根据所述适配习题得到的练习结果重复以上过程再次评估所述知识状态，以实现自适应学习的个性化习题适配。其可以基于少量学习数据准确获取学生知识状态，并根据学生的知识状态实现智能化习题适配，以提高学生学习和老师教学的效率。

公开(公告)号：CN117457030A

公开(公告)日：2024-01-26

申请号：CN202311108301.1

申请日：2023-08-30

申请人： 华中师范大学

发明人： 刘海 ,  张昭理 ,  欧景斌 ,  杨雪雪 ,  邸昂 ,  刘新 ,  邢师珍 ,  刘婷婷 ,  李友福

IPC分类号： G10L25/63 ,  G10L25/03 ,  G10L25/18 ,  G10L25/30

摘要： 本申请公开了一种基于多源特征的语音情绪识别方法，包括：采集开源语音识别数据集和环境声音识别数据集，分别训练得到语音识别网络模型和环境声音识别网络模型，采集开源情绪语音数据集进行音频增强；对增强情绪语音音频提取MFCC特征，并输入膨胀因果交互子网络得到高阶MFCC特征；将增强情绪语音音频输入语音识别网络模型和环境声音识别网络模型得到高阶文本特征和高阶环境特征，再与高阶MFCC特征融合后输入时序分解因果卷积块生成高阶时序因果复合特征，通过全连接层输出至分类网络层识别语音情绪。其可以解决传统语音情绪识别技术仅基于语音的声学特征、依赖标准干净的语音信号导致语音情绪识别准确率较低，无法在复杂环境下准确识别语音情绪的问题。

公开(公告)号：CN117034354A

公开(公告)日：2023-11-10

申请号：CN202311120675.5

申请日：2023-08-30

申请人： 华中师范大学

发明人： 刘海 ,  张昭理 ,  邸昂 ,  刘新 ,  邢师珍 ,  郑媛 ,  黄小吉 ,  刘婷婷 ,  李友福

IPC分类号： G06F21/62 ,  G06N20/00

摘要： 本申请实施例公开了一种数据隐私保护方法、装置、设备及存储介质，涉及隐私数据保护技术领域，该方法包括：获取学生主体的学习数据，对学习数据进行脱敏处理，输出脱敏学习数据；进行分组，对各组样本数据进行泛化处理；统计观察置信度，基于攻击者从泛化数据中攻击得到隐私数据的概率，计算期望置信度；若符合预设的数据标准，保留对应的第一数据；将第一数据输入机器学习模型中，基于预设安全准则对机器学习模型进行检测，获取符合预设安全准则的机器学习模型。本申请在机器学习模型的输入、模型、以及输出端的全过程保护了数据的隐私。