[发明专利]头戴式显示设备的输入控制方法、装置及头戴式显示设备

权利要求书

1.一种头戴式显示设备的输入控制方法，其特征在于，所述头戴式显示设备包括用于摄取目标区域的目标图像的至少一个相机；

所述方法包括：

在所述显示界面显示有多个虚拟按键的情况下，识别所述目标图像中是否存在挤压姿态手势；其中，所述挤压姿态手势包括：人手中的第一手指的指尖点挤压在该人手中第二手指的一个指关节点上；

在识别所述目标图像中存在挤压姿态手势的情况下，根据预设的多个指关节与多个虚拟按键的对应关系，将所述挤压姿态手势中被挤压的指关节对应的虚拟按键确定为目标虚拟按键；

将所述目标虚拟按键对应的信息作为用户输入信息。

2.根据权利要求1所述的方法，其特征在于，所述识别所述目标图像中是否存在挤压姿态手势，包括：

检测所述目标图像中是否存在人手；

在检测到所述目标图像中存在人手的情况下，识别所述人手上的骨骼点；其中，所述骨骼点包括所述人手的每个手指上的指尖点和指关节点、以及连接所述人手的腕关节点；

实时获取所述人手上的骨骼点的三维空间位置信息；

对所述人手上的骨骼点的三维空间位置信息进行追踪，以确定所述第一手指上的指尖点和所述第二手指上的一个指关节点满足重叠条件的情况下，根据所述目标图像确定用户是否做出挤压姿态手势。

3.根据权利要求2所述的方法，其特征在于，所述对所述人手上的骨骼点的三维空间位置信息进行追踪，包括：

获取预定帧数的所述人手上的各骨骼点的三维空间位置信息；

对所述各骨骼点的三维空间位置信息进行平滑滤波处理，将处理结果作为追踪结果。

4.根据权利要求2所述的方法，其特征在于，所述重叠条件包括：所述第一手指上的指尖点和所述第二手指上的一个指关节点发生重叠且重叠状态的持续帧数大于预设帧数。

5.根据权利要求1所述的方法，其特征在于，所述第一手指为大拇指，所述第二手指为食指、中指和无名指中任一个。

6.根据权利要求5所述的方法，其特征在于，所述多个虚拟按键包括9个虚拟按键，所述9个虚拟按键与所有第二手指的指关节点一一对应。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在所述目标虚拟按键对应一个信息情况下，将所述目标虚拟按键对应的该信息作为用户输入信息；

在所述目标虚拟按键对应按照预设顺序排列的n个信息情况下，在连续m次将同一指关节点对应的虚拟按键确定为目标虚拟按键时，将所述目标虚拟按键对应的第m个信息作为用户输入信息；其中，n为自然数且n1；m为自然数且n≥m1。

8.一种头戴式显示设备的输入控制装置，其特征在于，所述头戴式显示设备包括用于摄取目标区域的目标图像的至少一个相机；

所述装置包括：

识别模块，用于在所述显示界面显示有多个虚拟按键的情况下，识别所述目标图像中是否存在挤压姿态手势；其中，所述挤压姿态手势包括：人手中的第一手指的指尖点挤压在该人手中第二手指的一个指关节点上；

确定模块，用于在所述识别模块识别所述目标图像中存在挤压姿态手势的情况下，根据预设的多个指关节与多个虚拟按键的对应关系，将所述挤压姿态手势中被挤压的指关节对应的虚拟按键确定为目标虚拟按键；

处理模块，用于将所述确定模块确定的所述目标虚拟按键对应的信息作为用户输入信息。

9.一种头戴式显示设备，其特征在于，所述头戴式显示设备包括用于摄取目标区域的目标图像的至少一个相机；

所述头戴式显示设备还包括存储器和处理器，所述存储器用于存储计算机程序；所述处理器用于执行所述计算机程序，以实现根据权利要求1-7中任意一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-7中任意一项所述的方法。