[发明专利]基于注意力门控的循环神经网络的单通道语音增强方法有效
| 申请号: | 201910385797.4 | 申请日: | 2019-05-09 |
| 公开(公告)号: | CN110085249B | 公开(公告)日: | 2021-03-16 |
| 发明(设计)人: | 梁瑞宇;孔凡留;谢跃;王青云;程佳鸣;孙世若;赵力 | 申请(专利权)人: | 南京工程学院 |
| 主分类号: | G10L21/0232 | 分类号: | G10L21/0232;G10L21/0264;G10L25/18;G10L25/24;G10L25/30 |
| 代理公司: | 南京创略知识产权代理事务所(普通合伙) 32358 | 代理人: | 闫方圆 |
| 地址: | 211167 江苏省*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 注意力 门控 循环 神经网络 通道 语音 增强 方法 | ||
1.基于注意力门控的循环神经网络的单通道语音增强方法,其特征在于:包括以下步骤,
步骤(A),对带噪的单通道语音进行分帧加窗,提取38维信号特征,包括Bark频率倒谱系数及其衍生参数、基音相关系数的离散余弦变换、基音周期和频谱非平稳性度量参数;
步骤(B),构建用于单通道语音增强的深度循环神经网络;
步骤(C),利用纯净语音库和噪声库构建训练数据集;
步骤(D),利用训练数据的38维信号特征,18维理想频带增益和1维信号活性标志,训练步骤(B)构建的深度循环神经网络;
步骤(E),将提取的带噪语音特征输入训练好的深度循环神经网络,输出带噪语音的频带增益估计值,并进行平滑、内插得到内插增益;
步骤(F),将内插增益作用于带噪的单通道语音,得到增强后的语音频谱。
2.根据权利要求1所述的基于注意力门控的循环神经网络的单通道语音增强方法,其特征在于:步骤(A),提取38维信号特征,具体包括18个Bark频率倒谱系数,前6个Bark频率倒谱系数的一阶时间导数和二阶时间导数,前6个频带间基音相关系数的离散余弦变换,1个基音周期系数以及1个频谱非平稳性度量参数。
3.根据权利要求1所述的基于注意力门控的循环神经网络的单通道语音增强方法,其特征在于:步骤(B),构建用于单通道语音增强的深度循环神经网络,该深度循环神经网络包含六层,第一层为Dense层,激活函数为tanh,单元数为24;第二到五层为注意力门控LSTM层,激活函数为tanh,单元数分别为24,48,48和96;第六层为Dense层,激活函数为sigmoid,单元数为18, 该网络的第二层输出通过一层的Dense层,得到1维信号活性标志。
4.根据权利要求3所述的基于注意力门控的循环神经网络的单通道语音增强方法,其特征在于:所述深度循环神经网络的前向传播过程如公式(1)至公式(5)所示:
at=σ[Vatanh(Wact-1)] (1)
ot=σ(Wo·[ht-1,xt]+bo) (2)
其中,t为帧序号;at,ot,ct,ht分别为注意力门、输出门、细胞状态矢量和隐藏矢量,为细胞候补状态矢量,它们是同维度的;xt为输入矢量;Va和Wa均为计算注意力门的参数矩阵;Wo,bo分别为计算输出门的权重矩阵和偏置矢量;Wc,bc分别为计算候补状态矢量的权重矩阵和偏置矢量;σ为sigmoid函数;为逐元素相乘。
5.根据权利要求1所述的基于注意力门控的循环神经网络的单通道语音增强方法,其特征在于:步骤(C),利用纯净语音库和噪声库构建训练数据集,具体是将每个样本通过双二阶滤波器,以改变混合信号的幅度,所述双二阶滤波器H(z)的形式如公式(6)所示:
其中,r1...r4是在[-3/8,3/8]范围内均匀分布的随机值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京工程学院,未经南京工程学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910385797.4/1.html,转载请声明来源钻瓜专利网。





