[发明专利]一种非平行语料语音个性化转换方法

权利要求书

1.一种非平行语料语音个性化转换方法，其特征在于，包括以下步骤：

S1、根据文本采集目标语音，并对目标语音的文本和语音进行修正；

S2、将目标语音的中文音素对齐，得到目标语音中每个中文音素对应的音频；

S3、提取中文音素对应的音频特征和音素信息；

S4、训练HMM-GMM语音识别模型，并将提取的音频特征和音素信息输入到HMM-GMM语音识别模型中，得到目标语音音频特征与对应的中文音素之间的印射模型，印射模型用于对中文音素进行预测，通过预测的中文音素训练第一CHBG网络；

S5、目标语音的中文音素通过第一CHBG网络训练后，再通过对其训练DNN语言模型得到目标语音的音频特征对应的中文音素，并根据中文音素得到目标语音的PULSE；

S6、通过训练第二CHBG网络得到原语音的中文音素对应的PULSE与目标语音的中文音素对应的PULSE的对应模型；

S7、将DNN语言模型和CHBG网络串联即可将原语音转换为目标语音；

所述CHBG网络包括：

卷积神经网络，用于对原语音的音频进行特征训练，且卷积神经网络包括256个卷积核，采用depthwise convolution提高了卷积运算的速度；

高速神经网络，用于处理卷积信息，并对卷积结果进行归一化；

双向神经网络，用于对不同时刻的高速神经网络的参数进行更新；

GRU神经网络，用于将忘记门和输入门合成一个单一的更新门。

2.根据权利要求1所述的非平行语料语音个性化转换方法，其特征在于，所述步骤S1中在录音棚中采集至少1000句同一人物的语音作为目标语音，语音的采样频率为48000Hz，所采集的目标语音中包含22个声母，39个韵母以及声调组合成的217个中文音素。

3.根据权利要求1所述的非平行语料语音个性化转换方法，其特征在于，所述步骤S2中，将目标语音的中文音素对齐的具体步骤为通过人工分割得到目标语音的音频分割后的label文件，通过HMM-GMM语音识别模型对其进行训练，得到目标语音中每个中文音素对应的音频。

4.根据权利要求1所述的非平行语料语音个性化转换方法，其特征在于，所述步骤S3中，提取的音频特征包括LSF特征、HNR特征和GAIN特征，采用加窗分帧的傅里叶变化进行提取，其中窗长为0.025s，采样频率为16000Hz，对音频特征进行提取时，F0特征1维,GAIN特征1维,HNR特征5维,LSFsource特征10维,LSF特征30维。

5.根据权利要求1所述的非平行语料语音个性化转换方法，其特征在于，所述步骤S7具体如下：

将DNN语言模型和CHBG网络串联，以原语音的中文音素对应的PULSE与目标语音的中文音素对应的PULSE作为中间媒介将原语音转换为目标语音，并通过PULSEMODEL后端处理工具将PULSE进行合成。