[发明专利]眼睑线检测方法、装置和电子设备

权利要求书

1.一种眼睑线检测方法，其特征在于，所述方法包括：

检测图像的人脸关键点：

根据所述人脸关键点分割所述图像中的眼部区域图像；

将所述眼部区域图像输入第一神经网络，并经所述第一神经网络输出用于表示所述眼部区域图像中的眼睑线的检测结果；

其中，所述第一神经网络采用以下步骤预先训练完成：

获取训练图像集中的图像样本中的眼睛图像块以及所述眼睛图像块的噪声图像块；

将所述眼睛图像块和噪声图像块分别输入至第一神经网络，经所述第一神经网络提取所述眼睛图像块中的第一眼睑线关键点以及所述噪声图像块中的第二眼睑线关键点；

根据所述第一眼睑线关键点和第二眼睑线关键点计算眼睑线关键点的第一漂移信息；

至少以所述第一漂移信息为监督信息，对所述第一神经网络进行监督学习。

2.根据权利要求1所述的眼睑线检测方法，其特征在于，所述人脸关键点包括：眼睛关键点，所述眼睛关键点包括以下至少之一：瞳孔关键点、眼眶关键点、眼睛中心关键点、眼角关键点；

所述根据所述人脸关键点分割所述图像中的眼部区域图像，包括：

根据所述眼睛关键点分割所述图像中的眼部区域图像。

3.根据权利要求1所述的眼睑线检测方法，其特征在于，所述用于表示所述眼部区域图像中的眼睑线的检测结果包括：由单眼上眼睑处或下眼睑处预定数量的关键点表示的轨迹信息或拟合线。

4.根据权利要求1所述的眼睑线检测方法，其特征在于，所述眼睛图像块的噪声图像块的获取方式包括：

针对所述眼睛图像块进行数据增强处理，以获得所述眼睛图像块的噪声图像块。

5.根据权利要求4所述的眼睑线检测方法，其特征在于，所述针对眼睛图像块进行数据增强处理包括下述至少一个：

针对眼睛图像块进行旋转处理；

针对眼睛图像块进行水平和/或垂直方向上的平移处理；

针对眼睛图像块进行放大/缩小处理。

6.根据权利要求1-5中任一项所述的眼睑线检测方法，其特征在于，所述第一/第二眼睑线关键点包括：单眼位于上眼睑处的10-15个关键点，和/或，单眼位于下眼睑处的10-15个关键点。

7.根据权利要求1-5中任一项所述的眼睑线检测方法，其特征在于，所述根据所述第一眼睑线关键点和第二眼睑线关键点计算眼睑线关键点的第一漂移信息包括：

基于预定坐标系对所述第一眼睑线关键点的关键点坐标信息和/或第二眼睑线关键点的关键点坐标信息进行坐标变换：

根据所述第一眼睑线关键点和第二眼睑线关键点各自的关键点编号以及变换后的关键点坐标信息，计算具有相同关键点编号的至少一组眼睑线关键点之间的漂移向量；

其中，所述第一漂移信息包括所述漂移向量。

8.根据权利要求7所述的眼睑线检测方法，其特征在于，所述预定坐标系包括：眼睛图像块的坐标系。

9.根据权利要求1-5和8中任一项所述的眼睑线检测方法，其特征在于，所述第一神经网络的训练方法还包括：

根据第一眼睑线关键点和基于所述图像样本的眼睑线的标注数据形成的眼睛图像块的第三眼睑线关键点各自的关键点编号以及关键点坐标信息，计算具有相同关键点编号的至少一组眼睑线关键点之间的漂移向量，且所述漂移向量被作为第二漂移信息；

所述至少以所述第一漂移信息为监督信息，对所述第一神经网络进行监督学习包括：

以所述第一漂移信息和所述第二漂移信息为监督信息，对所述第一神经网络进行监督学习。

10.根据权利要求9所述的眼睑线检测方法，其特征在于，所述眼睑线的标注数据采用以下步骤获取：

确定眼睑线的曲线控制点；

根据所述曲线控制点形成第一曲线；

采用插值方式在所述第一曲线中插入多个点，所述插入的点的信息为所述眼睑线的标注数据。