[发明专利]语音口型同步方法、装置、电子设备及存储介质

说明书

本公开提供一种语音口型同步方法、装置、存储介质及电子设备；涉及计算机技术领域。所述方法包括：获取基础口型动作图像并提取其指定特征点，基于指定特征点利用网格变形器调整得到基础口型动作模型，得到其在网格变形器中对应的顶点信息。基于所述基础口型动作模型的顶点信息，利用由解析目标语音生成的第一口型动画数据进行计算，得到与目标语音同步的第二口型动画数据。本公开在制作2D角色语音口型同步动画时资源占用小、制作时间成本低而且动画效果更逼真。

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种语音口型同步方法、语音口型同步装置、计算机可读存储介质以及电子设备。

背景技术

现如今，随着动画制作水平的提高，越来越多的游戏增加了剧情对话动画。而且，为了提升用户的游戏体验，使得游戏角色的口型动画效果更逼真，就需要实现游戏角色的语音口型同步。

现有技术中，为了达到语音口型同步效果，需要美术制作所有的语音对应的口型动画，不仅资源占用大，而且制作时间成本高。

因此，提供一种资源占用小、制作时间成本低而且动画效果更逼真的角色语音口型同步方法是非常必要的。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种语音口型同步方法、语音口型同步装置、计算机可读存储介质以及电子设备。该方法在制作2D角色语音口型同步动画时资源占用小、制作时间成本低而且动画效果更逼真。

根据本公开的第一方面，提供一种语音口型同步方法，包括：

获取基础口型动作图像并提取所述基础口型动作图像的指定特征点；

基于所述指定特征点利用网格变形器调整得到所述基础口型动作模型；

获取所述基础口型动作模型在所述网格变形器中对应的顶点信息；

解析目标语音生成第一口型动画数据；

基于所述基础口型动作模型的顶点信息利用所述第一口型动画数据进行计算，得到与目标语音同步的第二口型动画数据。

在本公开的一种示例性实施例中，所述指定特征点为口型关键槽位点。

在本公开的一种示例性实施例中，所述基于所述指定特征点利用网格变形器调整得到所述基础口型动作模型，包括：

设置网格变形器中的网格权重；

基于所述指定特征点添加网格顶点；

根据所述网格权重调整所述网格顶点得到所述基础口型动作模型。

在本公开的一种示例性实施例中，所述解析目标语音生成第一口型动画数据，包括：

利用机器学习算法分析所述目标语音得到语音分析文件；

解析所述语音分析文件生成第一口型动画数据。

在本公开的一种示例性实施例中，所述语音分析文件为所述目标语音对应的音素文件，所述利用机器学习算法分析所述目标语音得到语音分析文件，包括：

对所述目标语音和样本语音进行特征参数提取；

将所述样本语音的特征参数作为输入层数据和所述特征参数对应的音素作为输出层数据，提供神经网络训练数据，通过迭代训练，得到神经网络模型；

将所述目标语音的特征参数输入到所述神经网络模型中，得到所述目标语音对应的音素文件。