公开(公告)号：CN118333058A

公开(公告)日：2024-07-12

申请号：CN202410451064.7

申请日：2024-04-15

Applicant: 南京大学

Inventor： 麦丞程 ,  陈宇 ,  王翰翔 ,  黄宜华

IPC: G06F40/295 ,  G06F18/214 ,  G06F18/241 ,  G06F18/25 ,  G10L15/02 ,  G10L15/06

Abstract: 本发明公开了一种语音‑文本多模态中文命名实体识别方法，该方法基于多任务学习，使用语音与文本作为输入。对于语音‑文本输入，首先，对输入的文本和语音进行编码，然后使用带掩码的语音识别辅助任务提取语音的语义特征；接着借助音频文本对齐工具对文本和语音进行对齐并构造掩码，然后通过带掩码的跨模态注意力机制提取字符粒度的语音特征；接着使用语音实体边界识别辅助任务提取语音中的停顿信息；最后通过转换矩阵的方式将提取的语音停顿信息引入到文本的命名实体识别序列标注过程中。本发明通过辅助任务提取了语音中的发音信息和停顿信息，提升了中文命名实体识别的准确性。

公开(公告)号：CN115409011A

公开(公告)日：2022-11-29

申请号：CN202211047628.8

申请日：2022-08-30

Applicant: 南京大学

Inventor： 麦丞程 ,  王宇翔 ,  陈宇 ,  黄宜华

IPC: G06F40/186 ,  G06F40/289 ,  G06K9/62 ,  G06F16/35

Abstract: 本发明公开了一种基于动态提示学习的小样本嵌套关系抽取方法，包括以下步骤：给定嵌套关系任务的原输入句子；经过Prompt模板转换函数得到Prompt输入语句；再输入到预训练语言模型，通过预训练语言模型在语句中的掩码位置预测出标签词；将预测出的标签词转化为对应的嵌套关系任务关系类型标签；迭代地使用Prompt模版将原任务输入句子与每层嵌套关系转化为Prompt输入句子并进行迭代式预测，最终得到所有层次的嵌套关系。本发明通过将嵌套关系抽取任务转化为掩码语言模型任务，充分发挥预训练模型和提示学习在小样本场景下的有效性，提升模型在小样本场景下的嵌套关系抽取准确性。