[发明专利]基于深度学习的文本生成语音的方法、系统、装置及介质

权利要求书

1.基于深度学习的文本生成语音的方法，其特征在于，包括：

获取第一数据集，所述第一数据集包含目标说话人语音；

根据所述第一数据集进行训练，获得目标模型；所述目标模型用于生成包含目标说话人特征的声音频谱；

获取待转换文本；

根据待转换文本确定待转换音频；

根据待转换音频和所述目标模型，确定目标声音频谱；

根据所述目标声音频谱，确定目标音频。

2.根据权利要求1所述的基于深度学习的文本生成语音的方法，其特征在于，所述训练所述第一数据集，获得目标模型，包括：

根据所述第一数据集，确定目标语音特征；

根据所述目标语音特征和获取到的第一训练音频，确定第一训练声音频谱；

根据所述第一训练声音频谱和声码器，确定第一目标音频；

根据所述目标说话人语音和所述第一目标音频，采用第一损失函数确定第一损失值，并根据所述第一损失值确定所述目标模型。

3.根据权利要求1所述的基于深度学习的文本生成语音的方法，其特征在于，所述训练所述第一数据集，获得目标模型，包括：

构建包含双向循环神经网络的音素分类器；

构建语音合成器；

根据所述第一数据集、所述音素分类器和所述语音合成器，确定目标模型。

4.根据权利要求3所述的基于深度学习的文本生成语音的方法，其特征在于，所述音素分类器通过以下步骤训练得到：

获取第二数据集；

根据所述第二数据集，确定频谱图；

根据所述频谱图，确定音素信息。

5.根据权利要求3所述的基于深度学习的文本生成语音的方法，其特征在于，所述根据所述第一数据集、所述音素分类器和所述语音合成器，确定目标模型，包括：

根据所述第一数据集和所述音素分类器，确定训练音素信息；

根据所述语音合成器和所述训练音素信息，确定所述第二训练声音频谱；

根据所述第二训练声音频谱和声码器，确定第二目标音频；

获取目标说话人语音和第二目标音频采用第二损失函数确定第二损失值；

根据所述第二损失值调整所述语音合成器和所述音素分类器的参数，确定所述目标模型。

6.根据权利要求3所述的基于深度学习的文本生成语音的方法，其特征在于：

所述双向循环神经网络包含多层的1维卷积层、1层池化层和多层全连接层。

7.根据权利要求1所述的基于深度学习的文本生成语音的方法，其特征在于，所述方法还包括：

对所述第一数据集进行预处理，所述预处理包括音频采样率调整、音频长短调整、音频降噪。

8.一种基于深度学习的文本生成语音系统，其特征在于，包括：

获取模块，用于获取第一数据集、待转换文本及待转换音频；

模型生成模块，用于训练所述第一数据集，确定目标模型；

语音生成模块，用于根据待转换文本和所述目标模型，确定目标音频。

9.一种装置，其特征在于，包括：

至少一个处理器；

至少一个存储器，用于存储至少一个程序；

当所述至少一个程序被所述至少一个处理器执行，使得所述至少一个处理器实现如权利要求1-7中任一项所述的基于深度学习的文本生成语音方法。

10.一种介质，其中存储有处理器可执行的程序，其特征在于，所述处理器可执行的程序在由所述处理器执行时用于实现如权利要求1-7中任一项所述的基于深度学习的文本生成语音方法。