[发明专利]用于脸部识别的方法和设备

权利要求书

1.一种脸部识别方法，包括：

从2D输入图像检测脸部特征点；

基于检测的脸部特征点调整存储的3D脸部模型，其中，用户的3D脸部模型包括基于从一个相机以多个视点捕获的包括用户的正面姿势和用户的侧面姿势的用户的二维先前图像个性化的3D模型，其中，3D脸部模型被登记对应于用户并被存储，其中，存储的3D脸部模型包括3D形状模型和3D纹理模型；

从调整的3D脸部模型产生2D投影图像；

基于2D输入图像和2D投影图像执行脸部识别，

其中，调整存储的3D脸部模型的步骤包括：

基于从2D输入图像检测的脸部特征点将存储的3D形状模型调整为与出现在2D输入图像中的脸部姿态匹配；

基于调整的3D形状模型的参数信息将3D纹理模型调整为具有与3D形状模型的姿态和表情相同或相似的姿态和表情，

其中，产生2D投影图像的步骤包括：从调整的3D纹理模型产生2D投影图像。

2.如权利要求1所述的脸部识别方法，其中，调整存储的3D脸部模型的步骤包括：通过将检测的脸部特征点映射到存储的3D脸部模型来调整存储的3D脸部模型的脸部姿态和脸部表情。

3.如权利要求1所述的脸部识别方法，其中，调整存储的3D形状模型的步骤包括：基于检测的脸部特征点调整3D形状模型的姿态参数和表情参数。

4.如权利要求1所述的脸部识别方法，其中，3D形状模型和3D纹理模型是脸部姿态和脸部表情能够变形的3D模型。

5.如权利要求1所述的脸部识别方法，其中，2D投影图像包括与2D输入图像中的脸部姿态相同的脸部姿态。

6.如权利要求1所述的脸部识别方法，其中，执行脸部识别的步骤包括：

确定2D输入图像与2D投影图像之间的相似程度；

基于相似程度是否满足条件来输出脸部识别的结果。

7.如权利要求1所述的脸部识别方法，其中，检测脸部特征点的步骤包括：

从2D输入图像提取脸部区域；

从提取的脸部区域检测眉毛、眼睛、鼻子、嘴唇、下巴、耳朵和脸部轮廓中的至少一个中的脸部特征点。

8.如权利要求1所述的脸部识别方法，其中，执行的步骤包括：通过将2D输入图像与2D投影图像进行比较来执行脸部识别。

9.如权利要求1所述的脸部识别方法，其中，存储的3D脸部模型通过以下步骤来产生：

从多个视点获得用户的2D脸部图像；

从2D脸部图像检测脸部特征点；

基于检测的脸部特征点产生能够变形的3D形状模型和能够变形的3D纹理模型；

将能够变形的3D形状模型和能够变形的3D纹理模型存储为用户的3D脸部模型。

10.如权利要求9所述的脸部识别方法，其中，产生的步骤包括：基于能够变形的3D形状模型和来自2D脸部图像中的至少一个2D脸部图像的纹理信息来产生能够变形的3D纹理模型。

11.如权利要求9所述的脸部识别方法，其中，产生的步骤包括：

确定用于将检测的脸部特征点映射到3D标准模型的特征点的参数；

通过将确定的参数应用到3D标准模型来产生能够变形的3D形状模型。

12.如权利要求9所述的脸部识别方法，其中，能够变形的3D纹理模型包括能够变形的3D形状模型的顶点。

13.如权利要求9所述的脸部识别方法，其中，2D脸部图像包括从不同视点的用户的脸部的图像。