[发明专利]一种原声语音翻译方法

说明书

本发明公开了一种原声语音翻译方法，涉及语音翻译技术领域，一种原声语音翻译方法，包括以下步骤：源语言语音采集，声音特征学习模块提取说话人的声音特征，送入深度神经网络DNN训练学习，STT模块转换源语音的文字信息，并分别由翻译模块和语言特征学习模块获取，其中，语言特征学习提取和记录源语言的语言特征，通过合成语音模块进行语音合成模拟。本发明通过将语言发音特征作为特征值送入深度神经网络DNN训练学习，学习后获得分别用于翻译与合成模块参考的语言特征模型特征向量与人声特征模型特征向量，通过合成语音模块进行语音合成模拟，发出与说话人语音相似的声音，使翻译后合成的语音高度接近说话人本人的特征。

技术领域

本发明涉及语音翻译技术领域，具体涉及一种原声语音翻译方法。

背景技术

人工智能技术的发展使得语音翻译极大的发展与应用。语音翻译的过程主要将说话人的源语音信号转换为源文本信息，源文本信息通过文本翻译模块转换为目标语言的文本信息，再通过语音合成模块生成目标语言的语音信号播放而完成语音翻译，如今常用的语音翻译技术中，其翻译后发出的合成语音往往出现性别差异，说话人为男性但翻译语音为女声，缺少对说话人个性化的反应，无法传递说话想表达的情感和语言特征，且往往输出的语音生硬且交互体验不佳，进而造成翻译效果不够理想。

发明内容

本发明的目的是提供一种原声语音翻译方法，以解决现有技术中的上述不足之处。

为了实现上述目的，本发明提供如下技术方案：一种原声语音翻译方法，包括以下步骤：

步骤一、源语言语音采集，通过语音采集模块将语音信息采集后，发送给声音特征学习模块和STT(Speech-To-Text)模块。

步骤二、声音特征学习模块提取说话人的声音特征，特征被提取后经过深度神经网络DNN的学习建立声音特征模型，语言发音特征作为特征值送入深度神经网络DNN(DeepNeural Network)训练学习，学习后获得分别用于翻译与合成模块参考的语言特征模型特征向量与人声特征模型特征向量。

步骤三、STT模块转换源语音的文字信息，并分别由翻译模块和语言特征学习模块获取，其中，语言特征学习提取和记录源语言的语言特征，该特征经深度神经网络DNN的学习后修正语言特征模型，该模型所用参数被用于翻译模块的重要参考参数，作为翻译的预判信息；

步骤四、通过合成语音模块进行语音合成模拟，将翻译后，且经深度神经网络DNN的学习后修正语言特征模型作为语音输出的信息基础，模拟输出语言信息，采用时间区间模型与基频模型结合建立合成语音模型，生成时频谱信号，利用葛林氏算法Griffin-Lim对合成语音模块进行合成处理，得到对应的人声特征语音信号，合成语音模型如下：

S为给定的时频谱信号，

x_i为第i次重建的信号，

f为短时距傅里叶变换，

f^-1为反变换，

S_i,P_i分别代表x_i的短时傅里叶变换的大小及相位；

步骤五、不断的重建信号，最终合成最接近说话者的语言、语音特征，并根据翻译内容，实时翻译播放，完成语音翻译过程。

优选的，所述步骤一中源语音采集包含对声音信号的预处理和判断，所述预处理包含语音的增强，背景声音消除，回声抑制等有利于优化信号的处理，所述判断包括判断声音信号中是否包含语言信息，如果未检测到语言信息，则当前信息被丢弃。

优选的，所述步骤二中声音特征模型具有预先训练好的声音特征模型，每次新的语音声音特征被学习均会修正该模型。