[发明专利]可佩戴的基于行为的视觉系统

说明书

背景

混合现实是一种允许在显示器中将虚拟影像与现实世界物理环境相混合的技术。用于混合现实的系统可包括例如透视的头戴式显示器或内置相机的智能手机。这样的系统通常包括在一个或多个应用的控制下提供图像的处理单元。

基于行为的分析已被用于机器人技术中，作为用于对控制系统的动作进行编程的框架。行为机器人技术中的一些行为模型使用针对对象的分层规则集，其中诸如避免碰撞之类的基本层行为是最基本的。行为是从演员或机器人的角度来聚集的，并且基础行为被用于生成高级控制系统。

在基于行为的系统中，机器人控制器被组织为模块(被称为行为)集合，模块接收来自传感器和/或其他行为的输入、处理该输入、以及将输出发送给致动器和/或其他行为。每个行为一般用于某个独立功能，诸如避免障碍物或回到目标位置。控制器中的所有行为被并行执行，同时地接收输入以及生成输出。

发明内容

描述了用于提供透视头戴式显示设备中的基于行为的视觉系统的技术。透视显示器装置包括透视头戴式显示器以及该显示器上的传感器，该传感器检测所述装置的视野中的声音和视觉数据。处理器与所述显示器协作以使用基于行为的真实对象映射系统向所述设备的佩戴者提供信息。至少创建相对于所述装置的全局和以自我为中心的行为区域，并且真实对象被指派映射到该对象所占据的各个区域的行为。被指派给对象的行为可由向佩戴者提供服务的应用所使用，该应用使用该行为作为对要在装置中提供的反馈的类型的评估的基础。

提供概述以便以简化形式介绍将在以下详细描述中进一步描述的一些概念的选集。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的作用域。

附图简述

图1A是描绘一系统环境中的具有可调整IPD的透视、混合现实显示设备的一个实施例的示例组件的框图，其中该设备可以在该系统环境中操作。

图1B是描绘具有可调整IPD的透视、混合现实显示设备的另一实施例的示例组件的框图。

图2A是示出延伸到一定距离处的注视点并朝对准远IPD的方向延伸的注视向量的示例的俯视图。

图2B是示出延伸到一定距离处的注视点并朝对准近IPD的方向延伸的注视向量的示例的俯视图。

图3是混合现实显示设备的眼镜实施例中提供对硬件和软件组件的支持的眼镜腿的侧视图。

图4是混合现实显示设备的实施例中提供对硬件和软件组件的支持和对微显示器部件的三维调整的眼镜腿的侧视图。

图5A是透视、近眼、混合现实设备的可活动的显示光学系统14的实施例的俯视图。

图5B是透视、近眼、混合现实设备的包括注视检测元件的安排的可活动显示光学系统的另一实施例的俯视图。

图5C是透视、近眼、混合现实设备的包括注视检测元件的安排的可活动显示光学系统的第三实施例的俯视图。

图5D是透视、近眼、混合现实设备的包括注视检测元件的安排的可活动显示光学系统的第四实施例的俯视图。

图6A是与透视、头戴式显示设备相关联的处理单元的硬件和软件组件的一个实施例的框图。

图6B是描述处理单元4的各组件的框图。

图7描绘了用户的触摸区域、自我为中心的区域以及全局区域。

图8描绘了包括具有基于行为的视觉系统的处理环境和支持的计算服务的系统的各功能组件。

图9是解说用于提供基于行为的视觉系统的过程的流程图。

图10是解说基于行为的视觉系统中的用户警告应用的流程图。

图11解说了基于行为的视觉系统中的用户警告应用所提供的用户界面。

图12是解说基于行为的视觉系统中的用户导航应用的流程图。

图13解说了基于行为的视觉系统中的用户导航应用所提供的用户界面。

图14是第一示例性处理设备的框图。

图15是另一示例性处理设备的框图。

具体实施方式

此处所描述的技术包括透视头戴式显示器设备，该设备为佩戴者提供基于行为的视觉系统，其中系统可相对于一个或多个用户或全局区域评估真实对象。行为是佩戴者与真实对象的交互的核心级行为动作。对象可被映射到一个或多个区域，并且根据相对于地理位置或设备场景映射的位置来标识。具有映射的行为的对象可被系统应用用于为佩戴者提供环境反馈。