[发明专利]人脸三维重建方法、装置、电子设备及可读存储介质

权利要求书

1.一种人脸三维重建方法，包括：

获取多帧人脸图像，其中，所述多帧人脸图像中每帧人脸图像包括二维人脸数据和三维人脸数据；

针对所述多帧人脸图像中的每帧人脸图像，将该帧人脸图像的二维关键点集进行三维映射，并根据三维映射得到的三维关键点集进行采样，得到该帧人脸图像的三维采样点集；

从所述多帧人脸图像中选取一帧人脸图像作为目标人脸图像，针对剩余帧人脸图像中的每帧人脸图像，根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据进行坐标转换，并对坐标转换后的三维采样点集进行配准，得到该帧人脸图像的配准数据，其中，所述剩余帧人脸图像为所述多帧人脸图像中除所述目标人脸图像之外的所有人脸图像；

根据所述剩余帧人脸图像中每帧人脸图像的配准数据和所述目标人脸图像的三维关键点集，对所述目标人脸图像进行三维重建，得到重建三维人脸图像。

2.如权利要求1所述的重建方法，所述针对所述多帧人脸图像中的每帧人脸图像，将该帧人脸图像的二维关键点集进行三维映射，并根据三维映射得到的三维关键点集进行采样，得到该帧人脸图像的三维采样点集，包括：

针对所述多帧人脸图像中的每帧人脸图像，对该帧人脸图像中的二维人脸数据进行关键点检测，得到该帧人脸图像的二维关键点集；将该帧人脸图像的二维关键点集映射到该帧人脸图像中的三维人脸数据中，得到该帧人脸图像的三维关键点集；根据该帧人脸图像中的三维关键点集，对该帧人脸图像中的三维人脸数据进行采样，得到该帧人脸图像的三维采样点集。

3.如权利要求2所述的重建方法，所述针对所述多帧人脸图像中的每帧人脸图像，将该帧人脸图像的二维关键点集映射到该帧人脸图像中的三维人脸数据中，得到该帧人脸图像的三维关键点集，包括：

针对所述多帧人脸图像中的每帧人脸图像，将该帧人脸图像中的二维人脸数据和三维人脸数据进行特征匹配，得到该帧人脸图像的转换矩阵；根据该帧人脸图像的转换矩阵和该帧人脸图像的二维关键点集，得到该帧人脸图像的三维关键点集。

4.如权利要求3所述的重建方法，所述针对所述多帧人脸图像中的每帧人脸图像，根据该帧人脸图像中的三维关键点集，对该帧人脸图像中的三维人脸数据进行采样，得到该帧人脸图像的三维采样点集，包括：

针对每帧人脸图像，根据该帧人脸图像的三维关键点集，从该帧人脸图像的三维人脸数据中确定出该帧人脸图像的采样区域，在该帧人脸图像中的采样区域中进行采样，得到该帧人脸图像的三维采样点集。

5.如权利要求1所述的重建方法，所述针对剩余帧人脸图像中的每帧人脸图像，根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据进行坐标转换，并对坐标转换后的三维采样点集进行配准，得到该帧人脸图像的配准数据，包括：

针对剩余帧人脸图像中的每帧人脸图像，根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据，将该帧人脸图像的三维人脸数据进行坐标转换，得到该帧人脸图像的转换三维人脸数据；对该帧人脸图像的转换三维人脸数据和所述目标三维人脸数据进行配准，得到该帧人脸图像的配准数据。

6.如权利要求5所述的重建方法，所述针对剩余帧人脸图像中的每帧人脸图像，根据该帧人脸图像的三维采样点集和所述目标人脸图像的目标三维人脸数据，将该帧人脸图像的三维人脸数据进行坐标转换，得到该帧人脸图像的转换三维人脸数据，包括：

针对所述剩余帧人脸图像中的每帧人脸图像，使用配准算法对该帧人脸图像的三维采样点集和所述目标三维人脸数据进行配准，得到该帧人脸图像的转换矩阵；根据该帧人脸图像的转换矩阵和该帧人脸图像的三维人脸数据，得到该帧人脸图像的转换三维人脸数据。