[发明专利]一种使用语音触发虚拟人物表情及口型动画的语音系统

说明书

本发明涉及互联网技术领域，尤其为一种使用语音触发虚拟人物表情及口型动画的语音系统，包括语音输入模块、语义识别模块、回应语音模块、表情反应标识模块、口型标识模块、播放语音模块、播放对应口型动画模块以及播放表情动画模块。本发明通过对输入或者应答语音的分析，生成相应的表情和口型对应的标识，通过匹配标识，播放对应标识的表情动画和口型动画，产生对语音输入者的回应表现，通过这种方式，可以让虚拟人物对输入者的语音输入产生不同的情感表现，可以让虚拟人物对输入者的语音输入产生回应式的对话表现，让虚拟人物形象更趋于真实，方便虚拟人物和真实人类产生人机对话时获得真实的脸部动画表现。

技术领域

本发明涉及互联网技术领域，具体为一种使用语音触发虚拟人物表情及口型动画的语音系统。

背景技术

随着计算机动画技术的不断进步，人们对人机交互中口型动画的要求越来越高。但是，汉语口型动画的发展相对比较落后。一方面由于口型动画是一个多学科交叉的研究方向，包括了人机交互、计算机图形学、语音语言学等，而相关学科的发展不均衡，使得构建一个逼真的、高自动化程度口型动画系统仍是一个极富挑战性的研究课题。

现有语音系统中使用的虚拟人物，不会因为语音分析，产生相应的表情或者口型，只有提前定义的固定的表情或者动画。鉴于此，我们提供一种使用语音触发虚拟人物表情及口型动画的语音系统。

发明内容

本发明的目的在于提供一种使用语音触发虚拟人物表情及口型动画的语音系统，以解决上述背景技术中提出现如今语音系统中使用的虚拟人物，不会因为语音分析，产生相应的表情或者口型，只有提前定义的固定的表情或者动画的问题。

为实现上述目的，本发明提供如下技术方案：

一种使用语音触发虚拟人物表情及口型动画的语音系统，包括语音输入模块、语义识别模块、回应语音模块、表情反应标识模块、口型标识模块、播放语音模块、播放对应口型动画模块以及播放表情动画模块。

作为优选，所述语音输入模块用于接收语音，所述语义识别模块用于对输入的语音进行分析，生成相应的表情和口型对应的标识，所述回应语音模块用于生成输出的语音，所述表情反应标识模块用于与表情数据库中表情进行匹配，所述口型标识模块用于与口型数据库中的口型进行匹配，所述播放语音模块用于播放语音，所述播放对应口型动画模块用于播放匹配后的口型动画，所述播放表情动画模块用于播放匹配后的表情动画。

作为优选，各模块件之间的工作流程包括如下步骤：

S1：通过语音输入模块输入语音；

S2：通过语义识别模块对汉语语音进行分析，生成相应的表情和口型；

S3：通过回应语音模块生成输出的语音，通过表情反应标识模块将生成的表情与表情数据库中的表情进行匹配，通过口型标识模块将生成的口型与口型数据库中的口型进行匹配；

S4：将录制的语音、表情动画以及口型变化使用虚拟人物形象进行播放，通过播放语音模块播放录制的语音，通过播放对应口型动画模块播放口型动画，通过播放表情动画模块播放表情动画；

S5：将语音、口型动画和表情动画进行同步播放处理。

作为优选，所述表情数据库通过MPEG-4人脸动画标准进行人脸动画标准建模，所述表情数据库的建模步骤如下所示：

S1提取脸部特征点：在人脸上指定多个特征点，并定义出面部动画参数的参考点；

S2脸部动画参数：将人脸多个特征点分为10组定义脸部的不同部分，包括头部运动、舌、眼和嘴部控制；