一种基于人脸唇动语音分离的声纹识别方法及装置

    公开(公告)号:CN117877482A

    公开(公告)日:2024-04-12

    申请号:CN202311827401.X

    申请日:2023-12-26

    摘要: 本发明涉及一种基于人脸唇动语音分离的声纹识别方法及装置,该方法包括:构造语音分离网络,所述语音分离网络包括面部属性分析网络、唇动分析网络和音频处理网络;基于所述语音分离网络从待检测视频中提取目标语音;基于声纹识别模型对所述目标语音进行声纹识别;其中,所述面部属性分析网络提取面部属性特征,所述唇动分析网络用于提取嘴唇运动特征,所述音频处理网络用于进行语音分离,所述声纹识别模型是基于注册语音训练得到的。本发明实现了多人说话场景下的单通道语音分离,提高了语音分离的灵活性。

    一种基于长时共振峰测量的语音同一性验证方法

    公开(公告)号:CN113409796B

    公开(公告)日:2022-09-27

    申请号:CN202110510987.1

    申请日:2021-05-11

    IPC分类号: G10L17/08 G06K9/62

    摘要: 本发明提供一种基于长时共振峰测量的语音同一性验证方法,已知一份来自同一说话人的语音文件,计算已知的语音文件中,任意两段语音的长时共振峰数据之间的距离,获得上限距离和下限距离,当采集到一份检材语音时,计算检材语音与已知语音文件的长时共振峰距离,若小于下限距离,则判断该检材语音与已知语音文件具有同一性;若大于上限距离,判断该检材语音与已知语音文件不具有同一性;若在上下限距离之间,则采用假设检验法来对同一性进行验证。本发明通过获取语音文件的长时共振峰,根据长时共振峰的距离,结合假设检验法,来进行语音同一性验证,能够提高验证的精度。

    一种多类型音频信号能量特征提取方法

    公开(公告)号:CN110322887B

    公开(公告)日:2021-10-15

    申请号:CN201910351459.9

    申请日:2019-04-28

    IPC分类号: G10L17/02

    摘要: 本发明提供一种多类型音频信号能量特征提取方法,选取采样频率,采集说话人的音频信号值;对采集的说话人的音频信号值进行滤波和切片处理,得到若干个一定长度的音频信号帧;建立数组;将每一组音频信号帧与数组相乘,得到局部被放大或者缩小的音频信号切片;对音频信号切片进行幅频分析,计算每一种频率信号的能量;生成一维数组;将所有的音频信号帧的特征形成一个二维数组,作为采集的音频信号的能量特征矩阵;依据该能量特征矩阵得到音频信号每一帧之间能量的变化特征矩阵和不同频率信号之间能量的变化特征矩阵。本发明能获得更加丰富的音频信号能量特征。

    声纹识别方法、系统、电子设备及存储介质

    公开(公告)号:CN117253489A

    公开(公告)日:2023-12-19

    申请号:CN202310943543.6

    申请日:2023-07-27

    IPC分类号: G10L17/02 G10L17/18

    摘要: 本申请公开了一种声纹识别方法、系统、电子设备及存储介质,该方法包括:首先,获取语音数据,并基于感知小波包熵变换方法提取语音数据的PWPE特征向量,通过对语音数据进行初步处理得到PWPE特征向量,以便于捕获到语音数据中的非平稳信号,从而有效适应外部环境的变化;然后,通过CBAM‑Res2Net‑TDNN模型对PWPE特征向量进行数据处理,CBAM‑Res2Net模块能够针对性地识别PWPE特征向量中的非平稳信号,统计池化层和损失函数层能够有效适应声纹验证环境的变化,避免由于验证环境变化导致的声纹识别性能下降的问题。

    一种语音情感标定辅助方法及系统

    公开(公告)号:CN113436649A

    公开(公告)日:2021-09-24

    申请号:CN202110710910.9

    申请日:2021-06-25

    IPC分类号: G10L25/63 G10L25/03

    摘要: 本发明提供一种语音情感标定辅助方法及系统,该方法包括以下步骤:利用语音情感识别算法对语音信号进行情感识别;基于已标注的语音数据,学习不同情感的韵律规律,即不同情感对应的各个情感特征的变化范围和趋势,进而建立韵律规则;接着借助韵律规则对语音信号进行情感识别;最后,综合这两种情感识别的结果,给出最终的标注结果。本发明一方面使用了语音情感识别算法结果进行智能标定,能大大减少标注人员工作量,提高工作效率;另一方面,结合情感分类任务中不同情感对应不同特征变化的规律,为不同的情感统一了标定标准和规则,提高了人工标定时情感标定的准确性,为标注人员提供专业的情感标注辅助。

    一种多类型音频信号能量特征提取方法

    公开(公告)号:CN110322887A

    公开(公告)日:2019-10-11

    申请号:CN201910351459.9

    申请日:2019-04-28

    IPC分类号: G10L17/02

    摘要: 本发明提供一种多类型音频信号能量特征提取方法,选取采样频率,采集说话人的音频信号值;对采集的说话人的音频信号值进行滤波和切片处理,得到若干个一定长度的音频信号帧;建立数组;将每一组音频信号帧与数组相乘,得到局部被放大或者缩小的音频信号切片;对音频信号切片进行幅频分析,计算每一种频率信号的能量;生成一维数组;将所有的音频信号帧的特征形成一个二维数组,作为采集的音频信号的能量特征矩阵;依据该能量特征矩阵得到音频信号每一帧之间能量的变化特征矩阵和不同频率信号之间能量的变化特征矩阵。本发明能获得更加丰富的音频信号能量特征。

    一种基于相关人群声纹库的声纹识别方法、装置及设备

    公开(公告)号:CN117877492A

    公开(公告)日:2024-04-12

    申请号:CN202311696764.4

    申请日:2023-12-11

    IPC分类号: G10L17/04 G10L17/06 G10L17/08

    摘要: 本发明涉及一种基于相关人群声纹库的声纹识别方法、装置及设备,该方法包括:从采集的普通人声纹数据中确认与目标人员预设指标相同的声纹数据并建立相关人员声纹库;根据目标人员语音样本库、检材语音、相关人员声纹库和声纹识别背景模型进行声纹对比确定类间测试分布曲线、类内测试分布曲线和声纹对比平均分数;根据类间测试分布曲线、类内测试分布曲线和声纹对比平均分数计算似然率;基于似然率确定是否存在与检材语音为同一人的声纹。本发明将与目标人员预设指标相同的声纹数据建立的相关人员声纹库、检材语音、目标人员语音样本库进行了多方面对比,然后计算对比结果的似然率以确定与检材语音为同一人的声纹,从而提高了声纹识别的准确性。