[发明专利]用于对象运动跟踪的方法及混合现实系统

说明书

公开了利用远程传感器和本地传感器作为输入设备的混合现实计算设备的示例。在一个示例中，一种混合现实计算设备包括图像传感器、远程输入设备、处理器、以及包括存储的指令的存储。所存储的指令可由该处理器执行以进行以下操作：基于来自该图像传感器的输出执行对象运动跟踪和环境跟踪，以及响应于检测到该远程输入设备处于使用中而在维持环境跟踪的同时调整运动跟踪的参数。

本申请是申请日：2017/01/16，申请号为201780004806.X(国际申请号为PCT/US2017/013638)，名称为“用混合现实系统的远程设备进行对象运动跟踪的方法及混合现实系统”的申请的分案申请。

背景技术

各种类型的用户输入机制可被用来向计算设备提供控制信号。例如，计算设备可利用采用感测到的由用户执行的身体动作(例如，身体姿势、眼镜注视、语音命令)的形式的自然用户输入，该自然用户输入被转换成该计算设备的控制信号。

概述

公开了利用远程传感器和本地传感器作为输入设备的混合现实计算设备的示例。在一个示例中，混合现实计算设备包括图像传感器、远程输入设备、处理器、以及包括存储的指令的存储。所存储的指令可由处理器执行以进行以下操作：基于来自该图像传感器的输出执行对象运动跟踪和环境跟踪；以及响应于检测到该远程输入设备处于使用中而在维持环境跟踪的同时调整运动跟踪的参数。

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的概念选集。本发明内容并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中所提及的任何或所有缺点的实现。

附图简述

图1和2示出了其中用户佩戴着示例混合现实计算设备的示例使用环境。

图3是解说用于使用混合现实计算设备和远程输入设备中的一者或多者执行对象运动跟踪的示例方法的流程图。

图4示出了示例远程输入设备的框图。

图5和6示意性地示出了示例混合现实计算设备。

详细描述

可穿戴混合现实计算系统可依赖于手和臂姿势来控制由该混合现实计算系统执行的各种动作。这些手和臂姿势可使用能够测量其前方的对象的深度的传感器(诸如图像传感器(例如，深度图像传感器或立体图像传感器配置))来感测和测量。这些图像传感器往往具有有限的感测视野，并且因为图像传感器放置于可穿戴计算系统上，所以传感器视野通常以操作者的头部附近为中心。如此，用户可以频繁地举臂降臂以将手置于传感器视野之内以供检测。

由此，根据本文所公开的诸实施例，配置成被拿在混合现实计算系统的操作者手中的远程输入设备可被选择性地用来执行姿势输入。通过允许经由远程输入设备的传感器来检测姿势输入，对操作者在可穿戴计算系统的图像传感器前方重复地执行运动姿势的需求可被减少。

如以下所更详细描述的，经由远程输入设备(例如，经由惯性运动传感器)执行的姿势运动跟踪与基于图像传感器数据执行的姿势运动跟踪相比可以是较不耗电的。由此，与基于图像传感器的姿势运动跟踪有关的一个或多个参数可在系统检测到远程输入设备处于使用中时被调整。例如，使用混合现实计算设备的板载图像传感器的姿势运动跟踪可在远程运动跟踪处于使用中时被禁用，或者可针对姿势运动跟踪减小图像传感器姿势运动跟踪的帧率。更一般地，可在执行姿势运动跟踪时考虑跨可穿戴计算系统和远程输入设备放置的能够执行姿势运动跟踪的多个传感器中的每一者的能力和功耗特性以在各种对象跟踪上下文中调整传感器使用。这可有助于在每个对象跟踪上下文中达成功耗和运动跟踪精度的合适平衡，从而在需要较低精度的情况下节省功率，同时在恰适的情况下达成较高精度。