[发明专利]语音提取方法、系统、设备及存储介质在审
申请号: | 202110605310.6 | 申请日: | 2021-05-31 |
公开(公告)号: | CN113345464A | 公开(公告)日: | 2021-09-03 |
发明(设计)人: | 刘博卿;王健宗 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G10L21/0272 | 分类号: | G10L21/0272;G10L21/0208;G10L25/30 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 周雷 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 提取 方法 系统 设备 存储 介质 | ||
1.一种语音提取方法,其特征在于,包括:
将混合语音输入到分离网络的特征提取模块,获取所述混合语音对应的特征向量,所述混合语音包括目标对象的语音和噪声语音;
将预设向量和所述特征向量输入到所述分离网络的语音提取模块,从所述混合语音中提取出所述目标对象的语音,其中,所述分离网络通过样本和标签训练得到,所述预设向量根据所述目标对象的预设语音获得,所述语音提取模块以所述预设向量为参考,调整所述目标对象的语音和所述噪声语音在所述混合语音中所占的比例,从而保留所述目标对象的语音而忘记所述噪声语音。
2.如权利要求1所述语音提取方法,其特征在于,所述语音提取模块以所述预设向量为参考,调整所述目标对象的语音和所述噪声语音在所述混合语音中所占的比例,从而保留所述目标对象的语音而忘记所述噪声语音,通过如下方式实现:
LSTM优化网络中的遗忘门将所述目标对象的语音映射成1,将所述噪声语音映射成0,所述语音提取模块包括LSTM优化网络。
3.如权利要求2所述语音提取方法,其特征在于,LSTM优化网络中的遗忘门计算公式如下:
ft=σ(We[ht-1,ej]+be),
其中,ft表示t时刻遗忘门的输出,σ表示sigmoid函数,We表示遗忘门的权重矩阵,be表示遗忘门的偏置,ht-1表示t-1时刻的隐藏状态,ej表示所述预设向量,j表示所述目标对象的语音在所述混合语音中的位置。
4.如权利要求1至3任一所述语音提取方法,其特征在于,所述预设向量通过如下方式获得:
将所述预设语音依次输入到若干个依次连接的LSTM网络,获取所述预设向量。
5.如权利要求1至3任一所述语音提取方法,其特征在于,所述特征提取模块为若干个依次连接的空洞卷积层。
6.如权利要求1至3任一所述语音提取方法,其特征在于,将预设向量和所述混合语音对应的特征向量输入到所述分离网络的语音提取模块,从所述混合语音中提取出所述目标对象的语音,包括:
将所述预设向量和所述混合语音对应的特征向量输入到修改后的LSTM网络中,并将修改后的LSTM网络的输出结果作为全连接层的输入,获取所述目标对象的语音。
7.如权利要求1至3任一所述语音提取方法,其特征在于,所述分离网络在训练时的损失函数如下:
XE=X*-XT,
其中,SI-SNR表示所述损失函数,X*表示所述分离网络的输出结果,表示标签。
8.一种语音提取系统,其特征在于,包括:
特征提取模块,用于将混合语音输入到分离网络的特征提取模块,获取所述混合语音对应的特征向量,所述混合语音包括目标对象的语音和噪声语音;
语音提取模块,用于将预设向量和所述特征向量输入到所述分离网络的语音提取模块,从所述混合语音中提取出所述目标对象的语音,其中,所述分离网络通过样本和标签训练得到,所述预设向量根据所述目标对象的预设语音获得,所述语音提取模块以所述预设向量为参考,调整所述目标对象的语音和所述噪声语音在所述混合语音中所占的比例,从而保留所述目标对象的语音而忘记所述噪声语音。
9.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述语音提取方法的步骤。
10.一种计算机存储介质,所述计算机存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述语音提取方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110605310.6/1.html,转载请声明来源钻瓜专利网。