[发明专利]语音信号重构方法及装置有效
申请号: | 201710539484.0 | 申请日: | 2017-07-04 |
公开(公告)号: | CN107274883B | 公开(公告)日: | 2020-06-02 |
发明(设计)人: | 王东;李蓝天 | 申请(专利权)人: | 清华大学 |
主分类号: | G10L13/033 | 分类号: | G10L13/033;G10L13/08;G10L17/04;G10L25/18 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;曹杰 |
地址: | 100084 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 信号 方法 装置 | ||
本发明提供一种语音信号重构方法及装置,其中,方法包括:获取样本语音信号并转换成log域频谱;利用预先训练的内容因子提取模型提取每一帧样本语音信号的内容因子,利用预先训练的说话人因子提取模型提取每一帧样本语音信号的说话人因子;基于该内容因子和说话人因子,训练内容谱重构模型和声纹谱重构模型;将目标语音信号输入声纹谱重构模型,获得目标语音信号中的声纹谱,以及将目标语音信号输入内容谱重构模型,获得目标语音信号中的内容谱;将内容谱和声纹谱相加,获得目标语音信号重构后的log域频谱。本发明能够基于内容和说话人对语音信号进行分解重构,与任务具有更强的相关性,重构效率高,重构后的语音信号与原语音信号比较相近。
技术领域
本发明涉及语音信号处理技术领域,尤其涉及一种语音信号重构方法及装置。
背景技术
语音信号的重构通常是指在发送端对语音信号进行分析,提取出语音信号的特征参量加以编码和加密,以取得和信道的匹配,经信息通道传递到接收端,接收端根据收到的特征参量恢复(重构)原始语音波形。
但是,现有语音信号重构的方法一般是基于源-滤波器(Source-Filter)模型,将语音信号x(t)分解成声门激励e(t)和声道调制h(t)两部分,写成卷积形式如下:
x(t)=x(t)×e(t)。
这一基础分解方式是很多语音信号处理技术的基础,如语音编码中的参数编码器,语音合成中的声码器等。现有技术中还没有基于内容和说话人对语音信号进行分解重构的方法。
鉴于此,如何提供一种能够基于内容和说话人对语音信号进行分解重构的方法及装置成为目前需要解决的技术问题。
发明内容
为解决上述的技术问题,本发明实施例提供一种语音信号重构方法及装置,能够基于内容和说话人实现对语音信号的分解重构,与任务具有更强的相关性,重构效率高,重构后的语音信号与原语音信号比较相近。
第一方面,本发明实施例提供一种语音信号重构方法,包括:
获取样本语音信号,将所述样本语音信号转换成log域频谱;
基于所述样本语音信号的log域频谱,利用预先训练的内容因子提取模型,提取每一帧样本语音信号的内容因子,以及利用预先训练的说话人因子提取模型,提取每一帧样本语音信号的说话人因子;
基于所提取的内容因子和说话人因子,训练得到用于将内容因子重构成内容谱的内容谱重构模型和用于将说话人因子重构成声纹谱的声纹谱重构模型;
将目标语音信号输入所述声纹谱重构模型,获得所述目标语音信号中的声纹谱,以及将目标语音信号输入所述内容谱重构模型,获得所述目标语音信号中的内容谱;
将所述内容谱和所述声纹谱相加,获得所述目标语音信号重构后的log域频谱。
可选地,将目标语音信号输入所述声纹谱重构模型,获得所述目标语音信号中的声纹谱,以及将目标语音信号输入所述内容谱重构模型,获得所述目标语音信号中的内容谱,包括:
获取目标语音信号,将所述目标语音信号转换成log域频谱;
基于所述目标语音信号的log域频谱,利用预先训练的内容因子提取模型提取每一帧目标语音信号的内容因子,以及利用预先训练的说话人因子提取模型提取每一帧目标语音信号的说话人因子;
利用所述内容谱重构模型,将每一帧目标语音信号的内容因子重构成内容谱,以及利用所述声纹谱重构模型,将每一帧目标语音信号的说话人因子重构成声纹谱。
可选地,所述将所述样本语音信号转换成log域频谱,包括:
将所述样本语音信号进行傅立叶变换,获得所述样本语音信号的log域频谱;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710539484.0/2.html,转载请声明来源钻瓜专利网。