[发明专利]虚拟角色驱动方法及装置

说明书

本公开涉及一种虚拟角色驱动方法及装置，所述方法应用于双摄相机，所述双摄相机包括第一相机和第二相机，所述方法包括：根据待拟合目标中的关键点、第一相机和第二相机针对待拟合目标拍摄的图像、第一相机初始参数、第二相机初始参数和初始模型参数，得到关键点拟合结果；根据所述关键点拟合结果驱动虚拟角色。利用待拟合目标中的关键点、双摄相机针对待拟合目标拍摄的图像、双摄相机的初始参数和初始模型参数得到的关键点拟合结果，可以方便、准确地对待拟合目标进行拟合。实现方式简单。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种虚拟角色驱动方法及装置、电子设备和存储介质。

背景技术

3D技术特别是3D人物重建、表情捕捉和动作捕捉技术，在多媒体等各个应用领域都得到了的广泛应用。在各种应用场景中，如何方便地根据待拟合目标的拍摄图像精确地拟合3D模型后驱动虚拟角色，成为计算机视觉技术领域亟待解决的问题。

发明内容

有鉴于此，本公开提出了一种技术方案。

根据本公开的一方面，提供了一种虚拟角色驱动方法，所述方法应用于双摄相机，所述双摄相机包括第一相机和第二相机，所述方法包括：

根据待拟合目标中的关键点、第一相机和第二相机针对待拟合目标拍摄的图像、第一相机初始参数、第二相机初始参数和初始模型参数，得到关键点拟合结果；

根据所述关键点拟合结果驱动虚拟角色。

在一种可能的实现法方式中，根据待拟合目标中的关键点、第一相机和第二相机针对待拟合目标拍摄的图像、第一相机初始参数、第二相机初始参数和初始模型参数，得到关键点拟合结果，包括：

根据待拟合目标中的关键点、第一相机针对待拟合目标拍摄的第一拍摄图像、第二相机针对待拟合目标拍摄的第二拍摄图像、第一相机初始参数、第二相机初始参数和初始模型参数，构建关键点拟合模型；

优化所述关键点拟合模型，得到第一相机拟合参数、第二相机拟合参数和模型拟合参数，并根据所述第一相机拟合参数、所述第二相机拟合参数和所述模型拟合参数确定关键点拟合结果。

在一种可能的实现法方式中，所述初始模型参数包括：初始形状参数、初始表面参数和初始位姿参数，

优化所述关键点拟合模型，得到第一相机拟合参数、第二相机拟合参数和模型拟合参数，并根据所述第一相机拟合参数、所述第二相机拟合参数和所述模型拟合参数确定关键点拟合结果，包括：

优化所述关键点拟合模型，得到第一形状参数、第一表面参数、第一位姿参数、第一相机拟合参数和第二相机拟合参数；并根据第一形状参数、第一表面参数、第一位姿参数、第一相机拟合参数和第二相机拟合参数确定关键点拟合结果，关键点拟合结果中的关键点和关键点在第一拍摄图像中投影的第一投影点之间的距离最小，关键点拟合结果中的关键点和关键点在第二拍摄图像中投影的第二投影点之间的距离最小。

在一种可能的实现法方式中，所述第一相机拟合参数包括第一旋转拟合参数和第一平移拟合参数，第二相机拟合参数包括第二旋转拟合参数和第二平移拟合参数，待拟合目标对相对于双摄相机的旋转参数为第三旋转参数，待拟合目标对相对于双摄相机的平移参数为第三平移参数，

在关键点拟合结果中，第一旋转拟合参数等于第二旋转拟合参数和第三旋转参数的乘积，第一平移拟合参数等于第二平移拟合参数和第三平移参数相加。

在一种可能的实现法方式中，所述方法还包括：

根据所述关键点拟合结果、第一拍摄图像、第二拍摄图像，利用迭代就近点算法得到拟合点拟合结果。

在一种可能的实现法方式中，根据所述关键点拟合结果、第一拍摄图像、第二拍摄图像，利用迭代就近点算法得到拟合点拟合结果，包括：