[发明专利]头戴显示设备的交互方法、装置、终端设备及存储介质

说明书

本申请实施例公开了一种头戴显示设备的交互方法、装置、终端设备及存储介质。上述方法包括：根据眼球追踪系统采集的眼球数据确定视线的聚焦点；当所述聚焦点位于显示的虚拟画面中包含的交互元素时，根据所述眼球追踪系统采集的眼球数据获取眼球运动信息；从指令集合中确定与所述眼球运动信息匹配的操作指令；基于所述操作指令触发针对所述交互元素的交互事件。上述头戴显示设备的交互方法、装置、终端设备及存储介质，能够简化交互方式，提高了用户与虚拟内容的交互性。

技术领域

本申请涉及人机交互技术领域，具体涉及一种头戴显示设备的交互方法、装置、终端设备及存储介质。

背景技术

随着科学技术的不断发展，增强现实(Augmented Reality，VR)、虚拟现实(Virtual Reality，为VR)等技术已越来越多地应用到各行各业中，利用AR/VR等技术，可以使用户从传统的二维屏幕空间向三维空间进行转换，实现更好的视觉效果。而在目前的AR/VR等显示设备中，存在交互困难、交互复杂等缺点，不利于用户与显示设备显示的虚拟内容进行交互。

发明内容

本申请实施例公开了一种头戴显示设备的交互方法、装置、终端设备及存储介质，能够简化交互方式，提高了用户与虚拟内容的交互性。

本申请实施例公开一种头戴显示设备的交互方法，包括：根据眼球追踪系统采集的眼球数据确定视线的聚焦点；当所述聚焦点位于显示的虚拟画面中包含的交互元素时，根据所述眼球追踪系统采集的眼球数据获取眼球运动信息；从指令集合中确定与所述眼球运动信息匹配的操作指令；基于所述操作指令触发针对所述交互元素的交互事件。

本申请实施例公开一种头戴显示设备的交互装置，包括：焦点确定模块，用于根据眼球追踪系统采集的眼球数据确定视线的聚焦点；眼动信息获取模块，用于当所述聚焦点位于显示的虚拟画面中包含的交互元素时，根据所述眼球追踪系统采集的眼球数据获取眼球运动信息；指令确定模块，用于从指令集合中确定与所述眼球运动信息匹配的操作指令；事件触发模块，用于基于所述操作指令触发针对所述交互元素的交互事件。

本申请实施例提供一种终端设备，包括存储器及处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器实现如上所述的方法。

本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的方法。

本申请实施例公开的头戴显示设备的交互方法、装置、终端设备及存储介质，根据眼球追踪系统采集的眼球数据确定视线的聚焦点，当聚焦点位于显示的虚拟画面中包含的交互元素时，根据眼球追踪系统采集的眼球数据获取眼球运动信息，从指令集合中确定与眼球运动信息匹配的操作指令，并基于操作指令触发针对交互元素的交互事件，用户通过眼部运动即可与交互元素进行交互，能够简化交互方式，提高了用户与虚拟内容的交互性。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中头戴显示设备的交互方法的应用场景图；

图2为一个实施例中头戴显示设备的交互方法的流程图；

图3为一个实施例中确定视线聚焦点的示意图；

图4为一个实施例中连续三帧眼部数据的示意图；

图5为一个实施例中连续两帧眼部数据的示意图；

图6为另一个实施例中头戴显示设备的交互方法的流程图；

图7为一个实施例中确定与眼球运动信息匹配的操作指令的流程图；