[发明专利]语音处理方法、系统、设备及存储介质在审
申请号: | 202210820858.7 | 申请日: | 2022-07-13 |
公开(公告)号: | CN115188363A | 公开(公告)日: | 2022-10-14 |
发明(设计)人: | 郭洋;王健宗;程宁 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G10L13/02 | 分类号: | G10L13/02;G10L19/16;G10L25/24;G10L25/30;G06K9/62;G06N3/04 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 梁国平 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 处理 方法 系统 设备 存储 介质 | ||
1.一种语音处理方法,所述方法包括:
获取语音信号和说话人向量,其中,所述语音信号包括时域分辨率;
根据所述语音信号得到梅尔谱数据;
将所述梅尔谱数据导入预设的声码器网络结构中的第一卷积层进行提取处理,得到初始隐状态数据,所述声码器网络结构包括所述第一卷积层、上采样层、残差层和第二卷积层,其中,所述第一卷积层的通道数量与所述第二卷积层的通道数量不同;
在所述初始隐状态数据经过所述上采样层的上采样处理,得到降维隐状态数据的情况下,将所述说话人向量和所述降维隐状态数据导入所述残差层进行合成处理,得到混合数据,其中,所述降维隐状态数据的序列长度与所述时域分辨率一致;
将所述混合数据导入所述第二卷积层进行降维处理,得到语音波形。
2.根据权利要求1所述的语音处理方法,其特征在于,所述将所述说话人向量和所述降维隐状态数据导入所述残差层进行合成处理,得到混合数据,包括:
根据预设的激活函数,对所述说话人向量和所述降维隐状态数据进行计算,得到综合映射数据;
根据所述综合映射数据和所述降维隐状态数据,得到混合数据。
3.根据权利要求2所述的语音处理方法,其特征在于,所述根据预设的激活函数,对所述说话人向量和所述降维隐状态数据进行计算,得到综合映射数据,包括:
将所述降维隐状态数据与说话人卷积量进行叠加处理,得到初始混合数据;
将所述初始混合数据导入预设的第一激活函数进行计算,得到第一映射数据;将所述初始混合数据导入预设的第二激活函数进行计算,得到第二映射数据;
将所述第一映射数据和所述第二映射数据进行矩阵点乘计算,得到综合映射数据;
其中,所述说话人卷积量表征为所述说话人向量经过一维卷积计算得到的数值。
4.根据权利要求2所述的语音处理方法,其特征在于,根据所述综合映射数据和所述降维隐状态数据,得到混合数据,包括:
将所述综合映射数据经过一维卷积计算得到的数值与降维隐状态卷积量进行叠加处理,得到混合数据;
其中,所述降维隐状态卷积量表征为所述降维隐状态数据经过一维卷积计算得到的数值。
5.根据权利要求1所述的语音处理方法,其特征在于,所述上采样层和所述残差层设置有多个,所述上采样层的数量与所述残差层的数量一一对应且所述上采样层与所述残差层依次连接;
所述在所述初始隐状态数据经过所述上采样层的上采样处理,得到降维隐状态数据的情况下,将所述说话人向量和所述降维隐状态数据导入所述残差层进行合成处理,得到混合数据,包括:
在所述降维隐状态数据的序列长度与所述时域分辨率不一致的情况下,将所述混合数据导入下一个上采样层进行上采样处理,得到新的降维隐状态数据;
将所述说话人向量和新的降维隐状态数据导入下一个残差层进行合成处理,得到新的混合数据,直至新的降维隐状态数据的序列长度与所述时域分辨率一致。
6.根据权利要求1所述的语音处理方法,其特征在于,所述第一卷积层包括多个一维卷积层,所述一维卷积层的卷积核的尺寸为7,步长为1,通道数量为512。
7.根据权利要求1所述的语音处理方法,其特征在于,所述根据所述语音信号得到梅尔谱数据,包括:
对所述语音信号进行短时傅里叶变换计算处理,得到语音幅度谱;
利用80维梅尔滤波器组对所述语音幅度谱进行滤波处理,得到梅尔谱数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210820858.7/1.html,转载请声明来源钻瓜专利网。