[发明专利]一种人脸图像的融合方法、装置及计算设备

权利要求书

1.一种人脸图像的融合方法，所述方法适于将目标图像中的人脸融合到素材图像的人脸中，所述方法包括步骤：

分别计算素材图像与目标图像中人脸的三维模型，作为第一三维模型和第二三维模型；

分别计算所述第一三维模型与第二三维模型投影到平面的第一投影矩阵和第二投影矩阵；

根据所述第一三维模型和第一投影矩阵计算出素材图像中人脸的第一纹理坐标；

根据所述第二三维模型和第二投影矩阵计算出目标图像中人脸的第二纹理坐标；

用所述第二纹理坐标对应替换第一纹理坐标，得到重建后的目标图像的人脸图像；以及

将所述重建后的目标图像的人脸图像与所述素材图像相融合，生成融合图像；

其中，在得到第一三维模型及第一投影矩阵之后，还包括校准第一三维模型和/或第一投影矩阵，包括步骤：

通过所述第一投影矩阵将第一三维模型投影到平面，与所述素材图像进行对比：若出现局部差异，则调整所述第一三维模型，若出现整体误差，则调整所述第一投影矩阵。

2.如权利要求1所述的方法，其中，所述得到重建后的目标图像的人脸图像的步骤之后，还包括步骤：

根据所述素材图像和目标图像的人脸特征分别生成对应的第一人脸蒙版和第二人脸蒙版；

根据所述第一人脸蒙版和第二人脸蒙版中蒙版区域的颜色值计算出融合后人脸的肤色值；以及

将融合后人脸的肤色值赋给所述素材图像的对应像素，得到调整后的素材图像。

3.如权利要求2所述的方法，其中，将重建后的目标图像的人脸图像与素材图像相融合、生成融合图像的步骤还包括：

将重建后的目标图像的人脸图像与调整后的素材图像相融合、生成融合图像。

4.如权利要求3所述的方法，其中，根据第一人脸蒙版和第二人脸蒙版中蒙版区域的颜色值计算出融合后人脸的肤色值的步骤包括：

分别计算所述第一人脸蒙版和第二人脸蒙版中蒙版区域的颜色均值，分别作为第一肤色和第二肤色；以及

根据所述第一肤色和第二肤色对目标图像中人脸区域的颜色值进行迁移运算，得到融合后人脸的肤色值。

5.如权利要求4所述的方法，其中，所述融合后人脸的肤色值为：

其中，pU_i为融合后人脸区域中第i个像素点的肤色值，pu_i为目标图像的人脸区域中第i个像素点的肤色值，M_mean为第一肤色，U_mean为第二肤色。

6.如权利要求5所述的方法，其中，所述第一三维模型和第二三维模型通过三维形变模型求得，包括步骤：

根据预先采集的三维人脸数据建立人脸空间基底；以及

根据所述人脸空间基底的线性组合拟合出目标人脸的三维模型。

7.如权利要求2-6中任一项所述的方法，其中，根据素材图像和目标图像的人脸特征分别生成对应的第一人脸蒙版和第二人脸蒙版的步骤还包括：

对所述第一人脸蒙版的蒙版区域和所述第二人脸蒙版的蒙版区域分别进行边缘羽化处理。