-
公开(公告)号:CN114333824A
公开(公告)日:2022-04-12
申请号:CN202111673373.1
申请日:2021-12-31
申请人: 佛山科学技术学院
摘要: 本发明提供一种基于Transformer模型的局部信息融合的语音识别网络,包括编码器及解码器,其特征在于,所述编码器的多头注意力模块MHA,解码器的多头交叉注意力模块MHCA上使用受限范围内的局部特征掩码LFMRS。本发明还提供一种基于Transformer模型的局部信息融合的语音识别方法和终端设备。弥补了原始Transformer模型缺乏显性地提取局部特征的缺陷,有效地降低了语音识别的CER值。
-
公开(公告)号:CN111414037B
公开(公告)日:2022-01-25
申请号:CN202010162004.5
申请日:2020-03-10
申请人: 佛山科学技术学院
IPC分类号: G05F3/26
摘要: 本发明公开了一种LDO稳压电路,包括:基准电压端Vref、第一偏置电压端Vb1、第二偏置电压端Vb2、第三偏置电压端Vb3、输入电压端VDD、输出电压端Vout、控制电路、反馈电路、接地端GND和功率管MP;其中,反馈电路接收输出电压端Vout的反馈,并将信号反馈给控制电路,控制电路根据反馈信号调整功率管MP,以稳定输出电压端Vout的电压。通过LDO稳压电路的电路结构,形成了三重稳压的电路形态,提高了整个LDO稳压电路的稳定性和可靠性。本发明主要用于集成电路电源管理技术领域。
-
公开(公告)号:CN114464172A
公开(公告)日:2022-05-10
申请号:CN202210082776.7
申请日:2022-01-24
申请人: 佛山科学技术学院
摘要: 本发明提供了一种transfomer模型处理方法、可读存储介质及设备,transfomer模型处理方法包括步骤:在进行训练时,根据transfomer模型的子层权重,计算得到目标层,在下一次训练时,删除或者保留目标层。本发明通过正向传播和反向传播来自动确认需要删除或者保留的子层,即通过本次训练得到的权重去计算下一次训练时需要删除或者保留的子层,进而减少了模型的参数量,实现轻量级的transfomer模型。
-
公开(公告)号:CN111414037A
公开(公告)日:2020-07-14
申请号:CN202010162004.5
申请日:2020-03-10
申请人: 佛山科学技术学院
IPC分类号: G05F3/26
摘要: 本发明公开了一种LDO稳压电路,包括:基准电压端Vref、第一偏置电压端Vb1、第二偏置电压端Vb2、第三偏置电压端Vb3、输入电压端VDD、输出电压端Vout、控制电路、反馈电路、接地端GND和功率管MP;其中,反馈电路接收输出电压端Vout的反馈,并将信号反馈给控制电路,控制电路根据反馈信号调整功率管MP,以稳定输出电压端Vout的电压。通过LDO稳压电路的电路结构,形成了三重稳压的电路形态,提高了整个LDO稳压电路的稳定性和可靠性。本发明主要用于集成电路电源管理技术领域。
-
-
-