[发明专利]与自然用户界面的双手交互

说明书

揭示了与自然用户界面的双手交互。例如，一个实施例提供了一种方法，该方法包括：通过由计算设备接收的图像数据来检测由用户的第一只手做出的上下文设置输入，并向显示器发送基于虚拟交互坐标系统定位的用户界面，该虚拟坐标系统基于用户的第一只手的位置来定位。该方法还包括通过由计算设备接收的图像数据检测由用户的第二只手做出的动作输入，该动作输入在用户的第一只手正做出上下文设置输入时做出，并且基于该上下文设置输入以及动作输入和虚拟交互坐标系统之间的交互来向显示器发送响应。

技术领域

本申请涉及自然用户界面，尤其涉及与自然用户界面的双手交互。

背景技术

已经开发了为用户提供控制用户界面的直观机制的自然用户界面。自然用户界面可利用一个或多个传感器来监视输入，诸如被转换成用户界面控制的手/手臂姿势和/或语音命令。

发明内容

揭示了有关与自然用户界面的双手交互的各实施例。例如，一个实施例提供了一种方法，该方法包括：通过由计算设备接收的图像数据来检测由用户的第一只手做出的上下文设置输入，并向显示器发送基于虚拟交互坐标系统定位的用户界面，该虚拟坐标系统基于用户的第一只手的位置来定位。该方法还包括通过由该计算设备接收的图像数据来检测由该用户的第二只手执行的动作输入，该动作输入在该用户的第一只手正在做出上下文设置输入时执行，并基于该上下文设置输入以及在该动作输入和该虚拟交互坐标系统之间的交互来向显示器发送响应。

提供本概述以便以简化形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。而且，所要求保护的主题不限于解决该公开的任一部分中所注的任何或全部缺点的实现方式。

附图说明

图1示意性地示出根据本公开的一实施例的查看增强现实用户界面的用户。

图2是说明根据本公开的一实施例的用于控制用户界面的方法的流程图。

图3是说明根据本公开的一实施例的在与用户界面交互时做出的示例手势序列。

图4是说明根据本公开的一实施例的在与用户界面交互时做出的另一示例手势序列。

图5是说明根据本公开的另一实施例的用于控制用户界面的方法的流程图。

图6是说明根据本公开的一实施例的被做出以控制用户界面的另一示例手势序列。

图7示意性地示出计算系统的一示例实施例。

具体实施方式

如上所述，自然用户界面可由计算设备利用来接收用户输入。自然用户界面可允许用户在使用环境中通过经由传感器检测到的诸如身体姿势/姿态之类的动作和语音命令来与计算设备交互。这样的传感器的示例包括，但不限于，图像传感器(包括深度相机和二维图像传感器)、声学传感器、和/或运动传感器。然而，确定检测到的姿势、语音段、和/或由用户执行的其它动作是否旨在控制界面可能成为挑战，因为对应于用户界面命令的各动作也可能对应于在用户界面上下文之外执行的各动作。

此外，某些类型的自然用户界面可能成为附加的挑战。例如，增强现实显示设备(诸如透视头戴式显示器)的自然用户界面可利用显示为位于用户的视野中的立体图像的用户界面元素。当用户试图与这样的用户界面元素进行交互时，各用户界面元素相对于用户身体的表观位置有时可能是用户难以精确感知的。这对于与该用户界面的用户交互而言可能成为挑战。