[发明专利]用于人脸识别的方法和装置

权利要求书

1.一种人脸识别方法，包括：

对于包含被部分遮挡的人脸的图像检测多个特征点；

基于所检测的特征点生成特征点图；

基于所检测的特征点生成裁切图像，所述裁切图像包含人脸未被遮挡的区域；

利用卷积神经网络针对所述裁切图像提取第一特征；

利用有向图神经网络针对所述特征点图提取第二特征；

将所述第一特征与所述第二特征进行联合，以生成所述图像的特征；以及

根据所生成的特征来执行人脸识别。

2.根据权利要求1所述的方法，还包括：

确定与所述第二特征有关的置信度；以及

在与所述第一特征联合之前，将所述第二特征乘以所述置信度。

3.根据权利要求2所述的方法，其中，确定与所述第二特征有关的置信度的步骤包括：

对所述图像进行多种变换，以生成多个变换图像；

针对所述多个变换图像中的每一个提取特征点；

计算针对所述多个变换图像分别提取的特征点之间的差异；

以使得所述置信度与所述差异之间具有相反关系的方式来确定所述置信度。

4.根据权利要求3所述的方法，其中，所述多种变换包括旋转、翻转、平移和遮挡中的两个或更多个。

5.根据权利要求1所述的方法，其中，在所述图像中，人脸的下半部分被遮挡，

所述方法还包括：从所检测的多个特征点之中去除与嘴部有关的特征点，并且基于剩余的特征点来生成所述特征点图，

其中，所述剩余的特征点包括与眉毛、眼睛、鼻子以及脸部轮廓有关的特征点。

6.根据权利要求5所述的方法，其中，使用三角剖分法生成所述特征点图，使得在所述剩余的特征点中的至少一些特征点之间形成三角形。

7.根据权利要求5所述的方法，还包括：

确定作为与左眼有关的多个特征点的中心的第一中心；

确定作为与右眼有关的多个特征点的中心的第二中心；

确定所述第一中心与所述第二中心之间的中点位置，作为双眼中心；

基于所述双眼中心与对应于鼻尖的特征点之间的中点位置确定所述裁切图像的下边缘。

8.根据权利要求1所述的方法，还包括：

将所述特征点图中的一个或多个特征点随机地移位，以获得移位后的特征点图；

利用所述特征点图和所述移位后的特征点图来训练所述有向图神经网络。

9.一种用于执行人脸识别的装置，包括：

存储有程序的存储器；以及

一个或多个处理器，所述处理器通过执行所述程序而执行以下操作：

对于包含被部分遮挡的人脸的图像检测多个特征点；

基于所检测的特征点生成特征点图；

基于所检测的特征点生成裁切图像，所述裁切图像包含人脸未被遮挡的区域；

利用卷积神经网络针对所述裁切图像提取第一特征；

利用有向图神经网络针对所述特征点图提取第二特征；

将所述第一特征与所述第二特征联合，以生成所述图像的特征；以及

根据所生成的特征来执行人脸识别。

10.一种存储有程序的存储介质，所述程序在被计算机执行时使得所述计算机执行根据权利要求1-8中任一项所述的人脸识别方法。