[发明专利]图像处理方法、装置和系统及存储介质

权利要求书

1.一种图像处理方法，包括：

获取初始人脸图像；

基于所述初始人脸图像进行三维重建，以获得三维人头模型，其中，所述三维人头模型包括网格模型和纹理模型；

在所述三维人头模型上预定义人脸关键点信息；

对所述三维人头模型进行变换；

将经变换的三维人头模型渲染为二维人脸图像；以及

根据所述经变换的三维人头模型与所述二维人脸图像之间的投影关系以及所述人脸关键点信息，确定所述二维人脸图像中的二维人脸关键点并获得所述二维人脸关键点的位置信息作为人脸关键点标注数据；

其中，所述对所述三维人头模型进行变换包括：

对所述三维人头模型进行刚体变换；和/或

对所述三维人头模型进行非刚体变换。

2.如权利要求1所述的图像处理方法，其中，在所述将经变换的三维人头模型渲染为二维人脸图像之前，所述图像处理方法还包括：

在所述经变换的三维人头模型上添加附加信息，其中，所述附加信息包括背景、头发和光照中的一项或多项。

3.如权利要求2所述的图像处理方法，其中，所述在所述经变换的三维人头模型上添加附加信息包括：

在所述经变换的三维人头模型上随机添加所述附加信息。

4.如权利要求1所述的图像处理方法，其中，所述人脸关键点信息包括与人脸内部关键点相关的内部点信息，所述二维人脸关键点包括二维内部关键点。

5.如权利要求4所述的图像处理方法，其中，所述内部点信息包括所述三维人头模型中的三维内部关键点的位置信息，

所述根据所述经变换的三维人头模型与所述二维人脸图像之间的投影关系以及所述人脸关键点信息，确定所述二维人脸图像中的二维人脸关键点并获得所述二维人脸关键点的位置信息作为人脸关键点标注数据包括：

根据所述投影关系以及所述三维内部关键点的位置信息，确定所述三维内部关键点在所述二维人脸图像所在的成像平面中投影获得的二维内部关键点并获得所述二维内部关键点的位置信息。

6.如权利要求1至5任一项所述的图像处理方法，其中，所述人脸关键点信息包括与人脸轮廓关键点相关的轮廓点信息，所述二维人脸关键点包括二维轮廓关键点。

7.如权利要求6所述的图像处理方法，其中，所述轮廓点信息包括所述三维人头模型中的、可能成为人脸轮廓关键点的三维轮廓点集的位置信息，

所述根据所述经变换的三维人头模型与所述二维人脸图像之间的投影关系以及所述人脸关键点信息，确定所述二维人脸图像中的二维人脸关键点并获得所述二维人脸关键点的位置信息作为人脸关键点标注数据包括：

确定所述三维轮廓点集与所述三维人头模型中的预定义的起点平面的交集为三维起点候选集；

根据所述投影关系以及所述三维轮廓点集的位置信息，确定所述三维轮廓点集和所述三维起点候选集在所述二维人脸图像所在的成像平面中投影获得的二维轮廓点集和二维起点候选集及所述二维轮廓点集和所述二维起点候选集的位置；

从所述二维起点候选集中选择轮廓起点和轮廓终点；

基于所述轮廓起点、所述轮廓终点和所述二维轮廓点集的外轮廓线确定人脸轮廓线；以及

基于所述人脸轮廓线确定所述二维人脸图像中的二维轮廓关键点并获得所述二维轮廓关键点的位置信息。

8.如权利要求7所述的图像处理方法，其中，所述基于所述人脸轮廓线确定所述二维人脸图像中的二维轮廓关键点并获得所述二维轮廓关键点的位置信息包括：

根据预定义的人脸部位剔除条件剔除所述人脸轮廓线中的、属于特定人脸部位的点，以获得新的人脸轮廓线；

将所述新的人脸轮廓线等分；以及

确定获得的等分点为所述二维人脸图像中的二维轮廓关键点并获得所述二维轮廓关键点的位置信息。