[发明专利]基于视线跟踪的交互控制方法、装置及智能终端

权利要求书

1.一种基于视线跟踪的交互控制方法，其特征在于，包括如下步骤：

检测用户的视觉焦点信息，依据所述视觉焦点信息选定当前用户界面中与其相匹配的任务窗口；

获取用户的眼部图像，依据眼部图像确定交互指令类型；

根据所述交互指令类型触发针对所述选定的任务窗口的交互控制事件。

2.根据权利要求1所述的基于视线跟踪的交互控制方法，其特征在于，

所述视觉焦点信息包括所述视觉焦点的位置信息；

所述依据所述视觉焦点信息选定当前用户界面中与其相匹配的任务窗口的过程具体包括：将所述视觉焦点信息中的位置信息与当前用户界面中的任务窗口的位置信息进行匹配，选定与视觉焦点信息相匹配的所述任务窗口。

3.根据权利要求2所述的基于视线跟踪的交互控制方法，其特征在于，视觉焦点信息还包括用于表征用户眼部与所述视觉焦点之间距离的距离信息；当所述距离信息表征的距离大于第一距离阈值且小于第二距离阈值时，将所述视觉焦点信息中的位置信息与当前用户界面中的任务窗口的位置信息进行匹配，选定与视觉焦点信息相匹配的所述任务窗口；否则不进行所述匹配。

4.根据权利要求1所述的基于视线跟踪的交互控制方法，其特征在于，所述检测用户视觉焦点信息的过程具体包括：

通过红外光源向用户眼部区域发射红外光；

采集红外图像，所述红外图像包括用户眼部区域反射红外光形成的光斑；

提取所述红外图像中光斑的位置特征数据并进行视线估计以获取用户视觉焦点的位置信息。

5.根据权利要求1所述的基于视线跟踪的交互控制方法，其特征在于，所述检测用户视觉焦点信息的过程具体包括：

基于光学相干层析成像获取用于表征用户眼部形变的晶状体特征数据；

将所述晶状体形变特征数据与预设的视觉焦点描述数据进行匹配，确定用户视觉焦点信息。

6.根据权利要求1所述的基于视线跟踪的交互控制方法，其特征在于，所述获取用户的眼部图像，依据眼部图像确定交互指令类型的过程具体包括：

从摄像单元获取的预览图像中获取一帧或多帧图像；

确定所述多帧图像中的眼部区域；

基于所述眼部区域提取眼部特征数据，将其与预设的交互指令类型描述数据进行匹配，确定相对应的交互指令类型。

7.一种基于视线跟踪的交互控制装置，其特征在于，包括：

检测选定单元，被配置为检测用户的视觉焦点信息，依据所述视觉焦点信息选定当前用户界面中与其相匹配的任务窗口；

指令获取单元，被配置为获取用户的眼部图像，依据眼部图像确定交互指令类型；

交互控制单元，被配置为根据所述交互指令类型触发针对所述选定的任务窗口的交互控制事件。

8.根据权利要求7所述的基于视线跟踪的交互控制装置，其特征在于，所述视觉焦点信息包括所述视觉焦点的位置信息；

所述检测选定单元依据所述视觉焦点信息选定当前用户界面中与其相匹配的任务窗口的过程具体包括：将所述视觉焦点信息中的位置信息与当前用户界面中的任务窗口的位置信息进行匹配，选定与视觉焦点信息相匹配的所述任务窗口。

9.根据权利要求7所述的基于视线跟踪的交互控制装置，其特征在于，所述检测用户视觉焦点信息的过程具体包括：

基于光学相干层析成像获取用于表征用户眼部形变的晶状体特征数据；

将所述晶状体形变特征数据与预设的视觉焦点描述数据进行匹配，确定用户视觉焦点信息。

10.一种智能终端，其特征在于，包括：

触敏显示器，其包括显示屏，用于显示所述当前用户界面；

存储器，用于存储支持收发装置执行上述基于视线跟踪的交互控制方法的程序；

通信接口，用于上述基于视线跟踪的交互控制装置与其他设备或通信网络通信；

一个或多个摄像头，用于进行视线跟踪；

一个或多个处理器，用于执行所述存储器中存储的程序；

一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序被配置为用于执行根据权利要求1至6任一项所述的方法。