[发明专利]一种实时语音驱动虚拟人物动作的方法和系统

权利要求书

1.一种实时语音驱动虚拟人物动作的方法，其特征在于，包括：

利用Unity引擎(但并不局限于Unity游戏引擎，所有实时游戏引擎都支持，例如Unreal游戏引擎等。)建立虚拟人物动作场景；

为所述虚拟人物执行不同动作添加相对应的变量条件；

将语音接口集成到Unity引擎中；

获取语音数据；

将获取到的所述语音数据通过所述语音接口上传给一语音识别系统，所述语音识别系统对所述语音数据进行内容识别后输出语音识别结果；

所述Unity引擎通过所述语音接口接收所述语音识别结果，并根据语音识别结果匹配虚拟人物动作变量条件；

所述Unity引擎根据匹配到的所述变量条件驱动所述虚拟人物执行相应动作。

2.根据权利要求1所述的实时语音驱动虚拟人物动作的方法，其特征在于，集成在所述Unity引擎(但并不局限于Unity游戏引擎，所有实时游戏引擎都支持，例如Unreal游戏引擎等。)中的所述语音接口由第三方语音平台提供。

3.根据权利要求2所述的实时语音驱动虚拟人物动作的方法，其特征在于，任何第三方语音平台提供的所述语音接口包括不限于百度AI开放平台提供的REST API语音接口或谷歌公司提供的Android SDK接口。

4.根据权利要求1所述的实时语音驱动虚拟人物动作的方法，其特征在于，所述语音识别系统通过一语音识别模型对所述语音数据进行内容识别，所述语音识别模型通过RBM受限玻尔兹曼机随机神经网络训练而得。

5.根据权利要求1所述的实时语音驱动虚拟人物动作的方法，其特征在于，驱动所述虚拟人物动作的方法通过以下公式(1)表达：

公式(1)中，表示虚拟人物骨骼模型的运动变形；

为表示虚拟人物骨骼模型上的关节j₁的运动姿态的对偶四元数；

w₁为关节j₁的权重；

表示虚拟人物骨骼模型上的关节j_n的运动姿态的对偶四元数；

w_n为关节j_n的权重。

6.根据权利要求5所述的实时语音驱动虚拟人物动作的方法，其特征在于，表示关节运动姿态的对偶四元数通过以下公式(2)表达：

上式中，为表示虚拟人物骨骼模型上的关节姿态的对偶四元数；

s₀为关节运动的旋转轴；

θ₀为关节运动的旋转角；

ε为对偶算子；

s_ε为关节沿旋转轴的平移；

s_ε＝r×s₀，r为关节的旋转中心。