[发明专利]一种基于性别融合信息的语音降噪方法有效

专利信息
申请号: 201710139644.2 申请日: 2017-03-09
公开(公告)号: CN108573698B 公开(公告)日: 2021-06-08
发明(设计)人: 李军锋;李煦;颜永红 申请(专利权)人: 中国科学院声学研究所
主分类号: G10L15/20 分类号: G10L15/20
代理公司: 北京方安思达知识产权代理有限公司 11472 代理人: 王宇杨;陈琳琳
地址: 100190 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 性别 融合 信息 语音 方法
【说明书】:

发明公开了一种基于性别融合信息的语音降噪方法,所述方法包括:步骤1)采集大量语音训练数据,训练得到男性说话人DNN‑NMF模型和女性说话人DNN‑NMF模型;步骤2)提取测试语音的频谱,确定测试语音说话人的性别;步骤3)根据步骤2)确定的性别,将测试语音的幅度谱输入相应的DNN‑NMF模型,得到降噪后的语音。本发明的方法将引入性别信息,提出了一种新的性别鉴定算法,并且针对不同性别的训练语音训练不同的DNN‑NMF模型,提高的模型的学习能力;而且模型结合DNN和NMF的优点,能够同时利用DNN的学习优势以及NMF对于语音频谱的描述能力,提高了降噪效果。

技术领域

本发明涉及一种语音降噪方法,更具体地说,本发明涉及一种基于性别融合信息的语音降噪方法。

背景技术

在很多应用场景中(如语音通信,自动语音识别,助听器)语音信号不可避免地受到周围干扰的影响,如路噪,周围非目标说话人干扰等,因此需要对设备采集到的带噪语音信号进行降噪处理。而且很多听力设备(或仪器)通常只有一个传声器来拾取语音信号,算法需要从一个混合语音中去除噪声信号,进一步增加了问题的解决难度。近年来,基于数据驱动的算法已经被提出来解决单传声器语音降噪问题,如基于非负矩阵分解(non-negative matrix factorization,NMF)的语音降噪算法和基于深度神经网络(deepneural networks,DNN)的降噪算法等。在基于NMF的降噪算法中,NMF首先被用于语音和噪声训练数据得到对应的字典描述语音和噪声的频谱结构;然后在降噪阶段,混合语音幅度谱被分解为字典矩阵和权重矩阵的乘积;最后,通过语音字典和对应权重矩阵的乘积来重构增强后的语音信号。然而在很多实际场景中,语音和噪声字典张成的子空间可能会重叠,导致很难准确估计权重矩阵以及有效抑制噪声信号。而在基于DNN的语音降噪算法中,语音降噪被当做是一个有监督的学习问题,通过监督学习的算法训练DNN模型预测目标语音。由于人类发声的机理,语音频谱具有很强的时频结构特性,如浊音的谐波结构等。然而很多基于DNN的降噪算法并没有考虑这种语音频谱结构特性。

发明内容

本发明的目的在于克服传统的基于NMF降噪算法和基于DNN降噪算法存在的问题,提出了一种新的融合性别信息的基于DNN-NMF的单传声器降噪方法,提高了降噪效果。

为了实现上述目的,本发明提供了一种基于性别融合信息的语音降噪方法,所述方法包括:

步骤1)采集大量语音训练数据,训练得到男性说话人DNN-NMF模型和女性说话人DNN-NMF模型;

步骤2)提取测试语音的频谱,确定测试语音说话人的性别;

步骤3)根据步骤2)确定的性别,将测试语音的幅度谱输入相应的DNN-NMF模型,得到降噪后的语音。

上述技术方案中,所述步骤1)具体包括:

步骤101)采集大量语音训练数据,所述语音训练数据包括:不含噪声的语音训练数据和纯噪声语音训练数据;

步骤102)对语音训练数据进行预处理,然后通过快速傅里叶变换提取语音训练数据的频谱;

步骤103)对不含噪声的语音训练数据按照性别进行分类:男性说话人训练数据和女性说话人训练数据,然后分别对男性说话人训练数据幅度谱和女性说话人训练数据幅度谱和进行非负矩阵分解:

从中得到男性说话人和女性说话人对应的字典矩阵和

步骤104)对纯噪声语音训练数据的幅度谱进行非负矩阵分解,得到噪声字典WN

步骤105)训练女性说话人DNN-NMF模型;

步骤106)训练男性说话人DNN-NMF模型。

上述技术方案中,所述步骤105)具体包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院声学研究所,未经中国科学院声学研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710139644.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top