[发明专利]基于头手协同动作的人机交互方法与系统

权利要求书

1.一种人机交互方法，包括：

响应于用户作出抬头动作，展示控件；

响应于对应于手部的光标在控件所在平面的投影进入所述控件的区域，将所述控件设置为待激活状态；

响应于手部在虚拟坐标系中相对所述控件的距离小于阈值，将所述控件设置为激活状态。

2.根据权利要求1所述的方法，其中

依据用户视线朝向上方且视线平面与水平面的夹角大于指定角度识别用户作出抬头动作；或者

依据向量序列满足指定条件识别用户作出抬头动作，其中通过对代表用户头部在现实世界中的姿态、用户视线和/或用户瞳孔朝向的向量的多个采样得到所述向量序列。

3.根据权利要求1-2之一所述的方法，还包括：

响应于用户作出低头动作，隐藏控件。

4.根据权利要求1-3之一所述的方法，还包括：

响应于手部在虚拟坐标系中相对所述控件的距离小于阈值，生成同所述控件对应的事件。

5.根据权利要求1-4之一所述的方法，还包括：

响应于对应于手部的光标在所述控件所在平面的投影进入所述控件的区域，将光标绘制为准星图标；

依据手部在虚拟坐标系中同所述控件的距离，更新准星图标的尺寸。

6.根据权利要求1-5之一所述的方法，还包括

响应于手部在虚拟坐标系中相对所述控件的距离小于阈值，将同所述控件相关的其他控件设置为初始状态。

7.根据权利要求1-6述的方法，其中

所述控件被绘制在相对于虚拟空间中相对于用户头部的指定位置；以及

响应于用户头部运动，保持所述控件在相对于虚拟空间中用户头部的指定位置。

8.根据权利要求1-7之一所述的方法，其中

依据瞳孔朝向和/或头部在现实坐标系中的姿态获得用户视线的朝向。

9.一种人机交互装置，包括：

头部姿态获取模块，用于响应于用户作出抬头动作，展示控件；

光标获取模块，用于响应于对应于手部的光标在控件所在平面的投影进入所述控件的区域，将所述控件设置为待激活状态；

手部位置获取模块，用于响应于手部在虚拟坐标系中相对所述控件的距离小于阈值，将所述控件设置为激活状态。

10.一种人机交互系统，包括计算单元、显示设备以及传感器模块；所述计算单元用于运行虚拟现实应用以构建虚拟现实场景；所述显示设备用于显示计算单元构建的虚拟现实场景；传感器模块用于感知用户头部姿态以及用户手部的姿态和/或位置；所述计算单元基于传感器所感知的用户头部姿态，指示显示设备展示控件；所述计算单元响应于对应于手部的光标在控件所在平面的投影进入所述控件的区域，将所述控件设置为待激活状态；所述计算单元响应于手部在虚拟世界中相对所述控件的距离小于阈值，将所述控件设置为激活状态。