[发明专利]一种三维人脸重建方法、装置及相关设备

权利要求书

1.一种三维人脸重建方法，其特征在于，所述方法包括：

获取对人脸进行拍摄得到的第一彩色图像和对应的第一深度图像；

在所述第一彩色图像中识别出位于人脸中心区域的多个中心特征点；

根据所述第一深度图像确定所述多个中心特征点的三维坐标；

基于所述多个中心特征点的三维坐标构建第一感兴趣区域；

基于所述第一感兴趣区域中的第一数据进行三维人脸重建，所述第一感兴趣区域中的第一数据根据所述第一深度图像确定。

2.根据权利要求1所述的方法，其特征在于，所述基于所述多个中心特征点的三维坐标构建第一感兴趣区域，包括：

计算所述中心特征点的中心点的坐标；

在所述中心点与拍摄所述第一彩色图像的相机的连线方向上，调整所述中心点的坐标；

将调整后的中心点作为区域中心点，构建三维感兴趣区域。

3.根据权利要求2所述的方法，其特征在于，所述将调整后的中心点作为区域中心点，构建三维感兴趣区域，包括：

将调整后的中心点作为区域中心点，将预设值作为半径，构建球形的第一感兴趣区域；或，

将所述调整后的中心点作为区域中心点，将预设值作为区域中心点到区域表面的距离，构建立方体的第一感兴趣区域。

4.根据权利要求1所述的方法，其特征在于，所述基于所述第一感兴趣区域中的第一数据进行三维人脸重建，包括：

将所述第一感兴趣区域中的第一数据与全局模型进行迭代最近点配准，得到所述第一数据与所述全局模型的刚性变换；

基于所述刚性变换，将所述第一数据融合到所述全局模型中。

5.根据权利要求1-4任意一项所述的方法，其特征在于，还包括：

获取对人脸进行拍摄得到的第i彩色图像和对应的第i深度图像，所述第i彩色图像和第i-1彩色图像为同一视频流中间隔的图像数量小于或等于预设阈值的不同图像；所述i为大于1的整数；

基于所述第i-1个感兴趣区域中的第i数据进行三维人脸重建，所述第i-1感兴趣区域中的第i数据根据所述第i深度图像确定；

基于所述第i数据调整所述第i-1感兴趣区域，以得到第i感兴趣区域。

6.一种三维人脸重建装置，其特征在于，包括：

第一图像获取单元，用于获取对人脸进行拍摄得到的第一彩色图像和对应的第一深度图像；

特性点识别单元，用于在所述第一彩色图像中识别出位于人脸中心区域的多个中心特征点；

坐标确定单元，用于根据所述第一深度图像确定所述多个中心特征点的三维坐标；

第一感兴趣区域构建单元，用于基于所述多个中心特征点的三维坐标构建第一感兴趣区域；

第一人脸重建单元，用于基于所述第一感兴趣区域中的第一数据进行三维人脸重建，所述第一感兴趣区域中的第一数据根据所述第一深度图像确定。

7.根据权利要求6所述的装置，其特征在于，所述第一感兴趣区域构建单元，包括：

坐标计算单元，用于计算所述中心特征点的中心点的坐标；

坐标调整单元，用于在所述中心点与拍摄所述第一彩色图像的相机的连线方向上，调整所述中心点的坐标；

感兴趣区域构建子单元，用于将调整后的中心点作为区域中心点，构建三维感兴趣区域。

8.根据权利要求7所述的装置，其特征在于，所述感兴趣区域构建子单元具体用于：

将调整后的中心点作为区域中心点，将预设值作为半径，构建球形的第一感兴趣区域；或，

将所述调整后的中心点作为区域中心点，将预设值作为区域中心点到区域表面的距离，构建立方体的第一感兴趣区域。

9.根据权利要求6所述的装置，其特征在于，所述第一人脸重建单元，包括：

配准单元，用于将所述第一感兴趣区域中的第一数据与全局模型进行迭代最近点配准，得到所述第一数据与所述全局模型的刚性变换；

融合单元，用于基于所述刚性变换，将所述第一数据融合到所述全局模型中。