[发明专利]用于视线焦点定位的可穿戴设备及视线焦点定位方法

说明书

技术领域

本发明涉及视线追踪技术领域，尤其涉及用于视线焦点定位的可穿戴设备及视线焦点定位方法。

背景技术

人类通过眼睛获取大量信息，同时使用眼睛来表达情绪与想法。人们可以通过追踪视线焦点的方式，获取眼睛传递出的丰富信息；进而进行有效的人机交互，以及传播学、心理学等领域的研究。视线追踪是利用各种检测手段，获取“注视点”的过程，并保证能在一段时间对其进行连续追踪的技术。该技术广泛应用于人机交互、虚拟现实等领域。

现有的视线追踪技术往往通过摄像机采集人脸或脸部图像，利用光学方法计算获得并追踪视线方向。根据系统搭建的不同，视线追踪设备可分为穿戴式和非穿戴式。穿戴设备通过摄像头采集眼部图像，首先确定相机坐标系中的视线方向；再通过增加外设等方法以确定世界坐标系中的视线方向。非穿戴式设备，则是通过多个外部摄像机采集照射眼部并获取眼部图像，直接得到测试者视线的空间坐标。非穿戴设备最大的缺点是：需要红外点光源准确照射眼部，因此不能随便移动头部位置；同时对摄像头精度要求高，也极易受到环境因素影响，不易推广。

根据光学方法的不同，视线追踪技术可分为2D视线追踪技术和3D视线追踪技术。2D追踪技术以瞳孔-角膜反射法为代表，利用瞳孔中心与角膜亮斑组成的向量表征视线方向。2D追踪技术已有不少类似设备，例如现有技术中已有一种基于人眼图像和视线追踪的操作指针指示控制设备，其能够佩戴于人体头部上且能够通过眼部动作对操作指针加以操作控制而实现人机交互，其在交互控制过程中，达到操作指针的指示位置与人眼视线所观察到的现实场景相叠加的人机交互效果。该设备采用了红外测距传感器对人眼所在位置进行测距，还通过其红外发射器实时地向人体眼睛所在位置发射出红外光，以此作为辅助的红外光源，并借助红外光在人眼角膜上反射而形成角膜反射光斑，相应地采用微型红外摄像头有效的拍摄人体眼睛所在位置的原始红外图像，用以进行人眼识别和视线追踪，避免了可见光环境阴暗等情况引起的干扰，并且角膜反射光斑可用于在后续的视线追踪识别过程中对角膜反射光斑中心所在位置加以定位，进而结合瞳孔中心所在位置，辅助实现对人眼的视线方向加以捕捉。该设备还通过分割人眼区域图像的方式，不管原始图像中人眼位置是否因为头部运动而发生位移变化，分割出的人眼区域图像的图像区域范围是相对固定的。

然而，此类2D视线追踪技术的缺点是利用的图像信息少，准确性和稳定性比较低。

3D追踪技术是通过双摄像头或多摄像头获得3D空间中各个参考点的坐标进行视线追踪。相比2D追踪技术准确率和稳定性都有提升，其主要问题在于可用的3D特征比较少，只能通过若干特征点获取眼球的大致的3D运动信息，而无法实现高精度的视线定位。

发明内容

本发明实施例提供一种用于视线焦点定位的可穿戴设备，用以实现高精度的视线焦点定位并忽略头部运动的影响，该设备包括：

眼镜支架，所述眼镜支架的左右眼镜框上分别安装有多个红外光源；所述多个红外光源分布于所述左右眼镜框上的不同位置，用于从不同角度照射虹膜；所述左右眼镜框上还分别安装有用于拍摄红外光源照射下的虹膜图像的摄像头；

所述眼镜支架上还安装有信号处理单元，所述信号处理单元包括：

同步控制模块，用于控制所述多个红外光源按设定顺序分别开启；以及，在红外光源开启的同时，同步触发开启的红外光源所在眼镜框上的摄像头拍摄红外光源照射下的虹膜图像；

图像处理模块，用于对虹膜图像进行处理，建立左右眼虹膜的3D模型；根据左右眼虹膜的3D模型，定位左右眼视线焦点。

一个实施例中，所述同步控制模块具体用于控制所述左右眼镜框上同时各有一个红外光源开启，以及，控制所述左右眼镜框上的摄像头同时拍摄开启的红外光源照射下的虹膜图像；

所述图像处理模块具体用于同时处理所述左右眼镜框上的摄像头拍摄的虹膜图像。

一个实施例中，所述图像处理模块具体用于：

结合虹膜图像对应红外光源的标定方向参数，基于光度学3D重建原理，对所述多个红外光源从不同角度照射的虹膜图像进行处理，建立左右眼虹膜的3D模型；

对左右眼虹膜的3D模型进行平面拟合，获得左右眼虹膜的3D平面；

将左右眼虹膜的3D平面的法向分别确定为左右眼视线方向；

根据左右眼视线方向，结合所述左右眼镜框上的摄像头的标定参数，确定世界坐标系下左右眼视线的焦点位置。

一个实施例中，所述摄像头配备红外滤光片。

一个实施例中，所述信号处理单元还包括：