[发明专利]虚拟人脸的驱动方法及装置

说明书

本发明适用于虚拟现实技术领域，提供了虚拟人脸的驱动方法及装置，包括通过采集人脸视频，检测人脸视频中各个视频帧的二维人脸特征点，并通过拟合计算的方式，将二维人脸特征点转换成三维人脸特征点；根据三维人脸特征点计算出驱动参数，以驱动虚拟人脸，降低了驱动虚拟人脸所需要的成本，简化了前期准备的步骤，而且扩大了虚拟人脸驱动方法的应用范围。

技术领域

本发明属于虚拟现实技术领域，尤其涉及虚拟人脸的驱动方法及装置。

背景技术

目前，虚拟人脸驱动在很多领域中被广泛应用，具有很大的市场价值。例如，在电影、动画以及游戏视频制作中经常使用人脸动作捕捉设备来跟踪真实人脸的变化，并将其映射到一个虚拟角色上，用来驱动虚拟角色的口型以及表情。此外虚拟社交是虚拟现实领域的一个重要应用，虚拟人脸驱动，可以被应用在虚拟社交中，用来驱动个性化的虚拟人，从而增强虚拟社交的真实性与互动性，优化用户的虚拟现实体验。

然而当前，国内外应用于电影、游戏娱乐等产业中的虚拟人脸的驱动方法，往往需要价格昂贵的头戴式设备跟踪真实的人脸运动，以消除头部姿态对跟踪带来的影响；而且往往需要多个摄像头，并在实体人脸上做标记，才可以在三维空间中跟踪脸部的若干特征点，因此当前虚拟人脸的驱动方法的前期准备步骤非常复杂。这也导致了一个问题，就是现有的虚拟人脸的驱动方法适用性较差，只能应用于通过特殊设备采集的数据。

综上，当前的虚拟人脸的驱动方法实现所需要的成本较高，而且适用性较差，需要大量时间和步骤进行前期准备才可以实现。

发明内容

有鉴于此，本发明实施例提供了虚拟人脸的驱动方法及装置，以解决现有的虚拟人脸的驱动方法的适用性低的问题。

本发明实施例的第一方面提供了一种虚拟人脸的驱动方法，包括：采集人脸视频，并检测所述人脸视频中各个视频帧的二维人脸特征点；对所述人脸视频中一个以上视频帧的二维人脸特征点进行拟合计算，生成三维人脸特征点；根据所述三维人脸特征点，计算驱动参数，并基于所述驱动参数，驱动虚拟人脸。

本发明实施例的第二方面提供了一种虚拟人脸的驱动装置，包括：采集模块，用于采集人脸视频，并检测所述人脸视频中各个视频帧的二维人脸特征点；生成模块，用于对所述人脸视频中一个以上视频帧的二维人脸特征点进行拟合计算，生成三维人脸特征点；驱动模块，用于根据所述三维人脸特征点，计算驱动参数，并基于所述驱动参数，驱动虚拟人脸。

本发明实施例的第三方面提供了一种虚拟人脸的驱动装置，包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。

本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法的步骤。

本发明实施例与现有技术相比存在的有益效果是：通过采集人脸视频，检测人脸视频中各个视频帧的二维人脸特征点，并通过拟合计算的方式，将二维人脸特征点转换成三维人脸特征点；根据三维人脸特征点计算出驱动参数，以驱动虚拟人脸，降低了驱动虚拟人脸所需要的成本，简化了前期准备的步骤，而且扩大了虚拟人脸驱动方法的应用范围。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的虚拟人脸的驱动方法的实现流程图；

图2是本发明实施例提供的对视频帧进行筛选以获得一采样视频帧集合的具体实现流程图；