[发明专利]虚拟键盘

说明书

提供了用于生成虚拟内容的系统、装置(或设备)、方法和计算机可读介质。例如，设备(例如，扩展现实设备)可以获得现实世界环境的场景的图像，其中，当虚拟内容被扩展现实设备的显示器显示时，现实世界环境是可通过显示器查看的。设备可以在图像中检测用户的物理手的至少一部分。设备可以基于检测到物理手的至少一部分来生成虚拟键盘。设备可以确定虚拟键盘在扩展现实设备的显示器上相对于物理手的至少一部分的位置。设备可以将虚拟键盘显示在显示器上的该位置处。

技术领域

概括地说，本公开内容涉及用于生成扩展现实键盘(被称为“虚拟键盘”)并且将其与用户的一只或多只手配准的技术和系统。

背景技术

扩展现实技术可以用于向用户呈现虚拟内容，和/或可以将来自物理世界的真实环境和虚拟环境结合以便为用户提供扩展现实体验。术语扩展现实可以包括虚拟现实、增强现实、混合现实等。扩展现实的这些形式中的每一种都允许用户体验沉浸式虚拟环境或内容或与之交互。例如，扩展现实体验可以允许用户与使用虚拟内容加强或增强的真实或物理环境进行交互。可以实现扩展现实技术来加强在广泛范围的背景(例如，娱乐、医疗保健、零售、教育、社交媒体等)下的用户体验。

发明内容

在一些示例中，描述了用于生成扩展现实键盘(也被称为虚拟键盘)的系统、方法和计算机可读介质。例如，由用户佩戴的扩展现实设备(例如，增强现实头戴式设备，诸如眼镜或其它头戴式设备)可以检测用户的一只或多只手，例如，通过在扩展现实设备的相机的视野中检测一只或多只手，使用位于手附近或手上的传感器来检测一只或多只手，等等。扩展现实设备可以生成虚拟键盘并且将其显示在扩展现实设备的显示器上，例如响应于在相机视野中检测到一只或多只手。在一些示例中，虚拟键盘可以被显示在现实世界内容的图像之上(例如，可以通过扩展现实设备的显示器查看现实世界环境的场景)或在虚拟内容之上。在一些示例中，虚拟键盘可以在扩展现实设备的显示器上被显示为投影(例如，在这些示例中，显示器可以包括扩展现实眼镜的镜片)，因此观看者可以在通过显示器查看现实世界的同时查看和控制虚拟键盘。从观看者通过扩展现实设备的角度来看，虚拟键盘看起来位于开放空间中。

扩展现实设备可以相对于用户的一只或多只手来配准虚拟键盘。例如，一只或多只手上的一个或多个界标点可以用作用于将虚拟键盘定位在扩展现实设备的显示器上的现实世界配准点。在一些实现中，一个或多个界标点可以包括用户的每只手上的至少一个点(例如，每只手的手掌上的点)以及手的每个手指上的至少一个点(例如，每个手指上的三个点)。如本文所使用的，术语“手指”可以指一只手的所有五个手指，包括大拇指。

在一些示例中，一旦基于与用户的一只或多只手进行配准而确定了虚拟键盘的位置，虚拟键盘可以保持在该位置处，使得其保持固定在该位置处，直至重新配准事件被检测到为止。重新配准事件的示例可以包括一只或多只手的达门限改变量的位置改变、一只或多只手的达移动门限量的移动、在确定虚拟键盘在显示器上的位置之后的预定时间量的到期、其任何组合、和/或其它重新配准事件。

在一些示例中，虚拟键盘可以被分成至少第一部分和第二部分。第一部分可以是相对于用户的第一只手进行配准的，而第二部分可以是相对于用户的第二只手进行配准的。例如，第一只手可以是用户的左手，并且虚拟键盘的第一部分可以包括虚拟键盘的左半部分(或其它左侧部分)，而第二只手可以是用户的右手，并且虚拟键盘的第二部分可以包括虚拟键盘的右半部分(或其它右侧部分)。在这样的示例中，虚拟键盘的第一部分可以跟踪第一只手，而虚拟键盘的第二部分可以跟踪第二只手。例如，当用户移动第一只手时，虚拟键盘的第一部分可以在显示器上相对于第一只手移动。类似地，虚拟键盘的第二部分可以在显示器上相对于第二只手移动。