[发明专利]一种图像处理方法及相关装置

权利要求书

1.一种图像处理方法，其特征在于，所述方法包括：

获取目标图像；所述目标图像中包括目标对象的面部；

根据所述目标图像，确定所述目标对象对应的三维面部重建参数；基于所述目标对象对应的三维面部重建参数，构建所述目标对象对应的三维面部网格；

将所述目标对象对应的三维面部网格转换为目标UV图；所述目标UV图用于承载所述目标对象对应的三维面部网格上各顶点的位置数据；

通过捏脸参数预测模型，根据所述目标UV图，确定目标捏脸参数；

基于所述目标捏脸参数，生成所述目标对象对应的目标虚拟面部形象；

其中，所述捏脸参数预测模型是通过以下方式训练的：

获取第一训练三维面部网格；所述第一训练三维面部网格是基于真实的对象面部重建的；

将所述第一训练三维面部网格转换为对应的第一训练UV图；

将所述第一训练UV图输入待训练的初始捏脸参数预测模型，确定所述第一训练三维面部网格对应的预测捏脸参数；

通过三维面部网格预测模型，根据所述第一训练三维面部网格对应的预测捏脸参数，确定所述第一训练三维面部网格对应的预测三维面部数据，其中包括，通过所述三维面部网格预测模型，根据所述第一训练三维面部网格对应的预测捏脸参数，确定所述第一训练三维面部网格对应的第一预测UV图；

根据所述第一训练UV图与所述第一预测UV图之间的差异，构建第三目标损失函数；基于所述第三目标损失函数，训练所述初始捏脸参数预测模型；

当所述初始捏脸参数预测模型满足第二训练结束条件时，确定所述初始捏脸参数预测模型作为所述捏脸参数预测模型。

2.根据权利要求1所述的方法，其特征在于，所述将所述目标对象对应的三维面部网格转换为目标UV图，包括：

基于三维面部网格上的顶点与基础UV图中的像素点之间的对应关系、以及所述目标对象对应的三维面部网格上各顶点的位置数据，确定所述基础UV图中像素点的红绿蓝通道值；

基于所述基础UV图中像素点的红绿蓝通道值，确定所述目标UV图。

3.根据权利要求2所述的方法，其特征在于，所述基于三维面部网格上的顶点与基础UV图中的像素点之间的对应关系、以及所述目标对象对应的三维面部网格上各顶点的位置数据，确定所述基础UV图中像素点的红绿蓝通道值，包括：

针对所述目标对象对应的三维面部网格上的每个面片，基于三维面部网格上的顶点与基础UV图中的像素点之间的对应关系，在所述基础UV图中确定所述面片的各个顶点各自对应的像素点，并根据每个顶点的位置数据确定其对应的像素点的红绿蓝通道值；

根据所述面片的各个顶点各自对应的像素点，确定所述面片在所述基础UV图中的覆盖区域，并对所述覆盖区域进行栅格化处理；

基于栅格化处理后的覆盖区域包括的像素点的数量，对所述面片的各个顶点各自对应的像素点的红绿蓝通道值进行插值处理，将插值处理后的红绿蓝通道值作为所述栅格化处理后的覆盖区域中的像素点的红绿蓝通道值。

4.根据权利要求2或3所述的方法，其特征在于，所述基于所述基础UV图中像素点的红绿蓝通道值，确定所述目标UV图，包括：

基于所述基础UV图中目标映射区域内各像素点各自的红绿蓝通道值，确定参考UV图；所述目标映射区域包括所述目标对象对应的三维面部网格上各个面片各自在所述基础UV图中的覆盖区域；

在所述目标映射区域未覆盖所述基础UV图的情况下，对所述参考UV图进行缝补处理，得到所述目标UV图。