[发明专利]人眼追踪方法及人眼追踪装置

说明书

本发明公开了一种人眼追踪方法及人眼追踪装置，该人眼追踪方法包括：对用户观看目标屏幕时的当前面部图像进行人脸检测得到当前人脸模型；根据所述当前人脸模型确定两眼瞳孔中心当前位置；根据用户观看目标屏幕上的标定点时的标定面部图像获取两眼视线参数；根据所述两眼视线参数和两眼瞳孔中心当前位置计算两眼视线注视点当前位置；对所述两眼视线注视点当前位置进行融合得到两眼在目标屏幕上的视线落点当前位置。该方法该追踪方法不需要使用特定的红外相机，也不需要额外设置红外光源，因此，不需要复杂的硬件架构，且节省成本。

技术领域

本发明涉及图像识别技术领域，尤其涉及人眼追踪方法及人眼追踪装置。

背景技术

眼球追踪技术是通过对人眼眼球的运行情况进行识别，分析人眼注视的视线变化，进而根据视线变化实现利用人眼控制设备的相关操作的技术，该技术可以应用在虚拟现实和人机交互等领域。

现有的眼球追踪技术，需要采用多个不可见光红外光源对人眼进行补光，然后采用红外相机获取人眼运动时的眼部图像，进而对人眼的眼球在空间中的运行情况进行建模和分析计算出人眼注视的视线变化。

上述眼球追踪技术需要特定的硬件设备，例如，红外光源和红外相机，因此，在硬件架构上较为复杂，且成本较高。

发明内容

本发明提供一种人眼追踪方法及人眼追踪装置，以解决相关技术中的不足。

根据本发明实施例的第一方面，提供一种人眼追踪方法，包括：

对用户观看目标屏幕时的当前面部图像进行人脸检测得到当前人脸模型；

根据所述当前人脸模型确定两眼瞳孔中心当前位置；

根据用户观看目标屏幕上的标定点时的标定面部图像获取两眼视线参数；

根据所述两眼视线参数和两眼瞳孔中心当前位置计算两眼视线注视点当前位置；

对所述两眼视线注视点当前位置进行融合得到两眼在目标屏幕上的视线落点当前位置。

可选的，所述对用户观看目标屏幕时的当前面部图像进行人脸检测得到当前人脸模型，包括：

对用户观看目标屏幕时的当前面部图像进行人脸检测获取当前人脸所在区域；

对当前人脸所在区域进行特征点定位得到包括多个特征点的当前人脸模型。

可选的，所述根据所述当前人脸模型确定两眼瞳孔中心的当前位置，包括：

根据所述当前人脸模型得到两眼所在当前区域；

根据所述两眼所在当前区域确定两眼瞳孔中心当前位置。

可选的，所述根据所述当前人脸模型得到两眼所在当前区域，包括：

根据所述当前人脸模型中的两眼特征点位置确定两眼所在当前区域的起始位置、长度和宽度；

界定出以所述起始位置为左上角，长边为所述长度以及短边为所述宽度的四边形区域，所述四边形区域为所述两眼所在当前区域。

可选的，所述根据所述两眼所在当前区域确定两眼瞳孔中心当前位置，包括：

对所述两眼所在当前区域进行二值化处理得到两眼所在当前区域的二值化图像；

对所述二值化图像在水平方向和竖直方向上进行积分投影粗定位出两眼瞳孔中心当前位置；

根据粗定位出的所述两眼瞳孔中心当前位置拟合确定两眼瞳孔所在当前区域；

根据所述两眼瞳孔所在当前区域精定位出两眼瞳孔中心当前位置。