[发明专利]人眼追踪方法及人眼追踪装置

权利要求书

1.一种人眼追踪方法，其特征在于，包括：

对用户观看目标屏幕时的当前面部图像进行人脸检测得到当前人脸模型；

根据所述当前人脸模型确定两眼瞳孔中心当前位置；

根据用户观看目标屏幕上的标定点时的标定面部图像获取两眼视线参数；

根据所述两眼视线参数和两眼瞳孔中心当前位置计算两眼视线注视点当前位置；

对所述两眼视线注视点当前位置进行融合得到两眼在目标屏幕上的视线落点当前位置；

所述两眼视线参数包括两眼特征映射参数和两眼视线注视点参数；

所述根据用户观看目标屏幕上的标定点时的标定面部图像获取两眼视线参数，包括：

根据用户观看目标屏幕上的标定点时的标定面部图像获取标定人脸模型；

根据所述标定人脸模型确定两眼瞳孔中心标定位置和两眼眼角中心标定位置；

根据两眼瞳孔中心标定位置和两眼眼角中心标定位置计算两眼瞳孔中心相对于两眼眼角中心的两眼特征映射参数；

根据所述两眼特征映射参数和所述两眼瞳孔中心标定位置计算两眼视线特征标定值；

根据所述两眼视线特征标定值和预设标定点位置计算两眼视线注视点参数；

所述根据所述两眼视线参数和两眼瞳孔中心当前位置计算两眼视线注视点当前位置，包括：

根据所述两眼特征映射参数和所述两眼瞳孔中心当前位置计算两眼视线特征当前值；

将所述两眼视线特征当前值和所述两眼视线注视点参数输入到人眼追踪模型中，计算两眼视线注视点当前位置；

所述对所述两眼视线注视点当前位置进行融合得到两眼在目标屏幕上的视点落点当前位置，包括：

根据预设标定点位置获取融合矩阵系数；

构建以所述融合矩阵系数和所述两眼视线注视点当前位置的融合矩阵；

对所述融合矩阵进行求解得到两眼在目标屏幕上的视点落点当前位置。

2.根据权利要求1所述的方法，其特征在于，所述对用户观看目标屏幕时的当前面部图像进行人脸检测得到当前人脸模型，包括：

对用户观看目标屏幕时的当前面部图像进行人脸检测获取当前人脸所在区域；

对当前人脸所在区域进行特征点定位得到包括多个特征点的当前人脸模型。

3.根据权利要求1所述的方法，其特征在于，所述根据所述当前人脸模型确定两眼瞳孔中心的当前位置，包括：

根据所述当前人脸模型得到两眼所在当前区域；

根据所述两眼所在当前区域确定两眼瞳孔中心当前位置。

4.根据权利要求3所述的方法，其特征在于，所述根据所述当前人脸模型得到两眼所在当前区域，包括：

根据所述当前人脸模型中的两眼特征点确定两眼所在当前区域的起始位置、长度和宽度；

界定出以所述起始位置为左上角，长边为所述长度以及短边为所述宽度的四边形区域，所述四边形区域为所述两眼所在当前区域。

5.根据权利要求3所述的方法，其特征在于，所述根据所述两眼所在当前区域确定两眼瞳孔中心当前位置，包括：

对所述两眼所在当前区域进行二值化处理得到两眼所在当前区域的二值化图像；

对所述二值化图像在水平方向和竖直方向上进行积分投影粗定位出两眼瞳孔中心当前位置；

根据粗定位出的所述两眼瞳孔中心当前位置拟合确定两眼瞳孔所在当前区域；

根据所述两眼瞳孔所在当前区域精定位出两眼瞳孔中心当前位置。

6.根据权利要求4所述的方法，其特征在于，

所述当前人脸模型中的两眼特征点包括两眼外眼角当前位置、两眼内眼角当前位置、两眼上眼皮当前位置和两眼下眼皮当前位置；

所述根据所述当前人脸模型中的两眼特征点确定两眼所在当前区域的起始位置、长度和宽度，包括：

根据所述两眼外眼角当前位置和两眼上眼皮当前位置确定两眼所在当前区域的起始位置；

根据所述两眼外眼角当前位置和两眼内眼角当前位置确定两眼所在当前区域的长度；

根据所述两眼上眼皮当前位置和两眼下眼皮当前位置确定两眼所在当前区域的宽度。