[发明专利]近眼显示器系统

权利要求书

1.一种近眼显示器系统，包括：

近眼显示器，包括：

光学组件，具有被配置为根据显示指令显示对应于虚拟对象的图像的电子显示器；

图像装置，被配置为捕获所述近眼显示器的局部区域的一部分的一个或多个图像；以及

控制器，被配置为：

使用所捕获的一个或多个图像确定位于所述局部区域内的个体的手部的位置；

基于所述手部的第一组确定位置来识别由所述个体的所述手部执行的第一手势，所述第一手势对应于一个或多个手部移动或手部位置的预定序列；并且

更新所述显示指令，以使所述电子显示器在经由所述电子显示器呈现给所述近眼显示器的用户的增强现实环境中，在与和所述第一手势相关联的所述个体的身体的预定部分相关联的位置处显示一个或多个虚拟对象以突出所识别的第一手势，其中所显示的一个或多个虚拟对象的属性基于所识别的第一手势的移动速度。

2.根据权利要求1所述的系统，其中，所述个体是所述近眼显示器的所述用户。

3.根据权利要求1所述的系统，其中，所述第一手势包括所述个体的第一手部在与所述局部区域内的对象表面相交的路径中的移动。

4.根据权利要求1所述的系统，其中，所述第一手势包括手部位置，在所述手部位置中所述个体的所述手部位于相对于彼此的预定位置并且将它们的位置保持至少阈值时间段。

5.根据权利要求1所述的系统，进一步包括音频传感器，所述音频传感器被配置为检测局部环境中的音频信息，并且其中，所述控制器被进一步配置为更新所述显示指令，以使所述电子显示器基于检测到的音频信息来显示第一虚拟对象。

6.根据权利要求5所述的系统，其中，所述第一虚拟对象包括基于检测到的音频信息的转录的内容。

7.根据权利要求1所述的系统，进一步包括音频装置，所述音频装置被配置为向所述用户播放音频内容，并且所述控制器被进一步配置为使所述音频装置与所述电子显示器显示第一虚拟对象同时地基于所述第一手势向所述用户播放所述音频内容。

8.根据权利要求1所述的系统，其中，所述控制器被进一步配置为：

使用训练的模型分析一个或多个所捕获的图像，以识别与位于所述局部区域内的个体的手部相关联的多个手部姿势；并且

基于多个所识别的手部姿势来识别由所述个体的所述手部执行的所述第一手势，其中，所述第一手势对应于手部姿势随时间的预定序列。

9.根据权利要求8所述的系统，其中，所述控制器被进一步配置为：

使用所述训练的模型分析所述一个或多个所捕获的图像，以识别与所述个体的所述手部相关联的一个或多个关节位置；并且

将所识别的一个或多个关节位置转换为手部姿势。

10.根据权利要求1所述的系统，其中，所述第一手势对应于手部姿势随时间的预定序列，在所述预定序列中所述手部的移动超过阈值速度。

11.根据权利要求1所述的系统，其中，所述控制器被进一步配置为基于由多个手部姿势所指示的所述个体的所述手部相对于所述个体的身体的位置，来识别所述第一手势。

12.根据权利要求1所述的系统，其中，基于所述手部的移动速度来选择第一虚拟对象，所述手部的移动速度基于多个手部姿势而确定。

13.根据权利要求1所述的系统，其中，第一虚拟对象被显示的速率或所述第一虚拟对象的移动速率基于所述手部的移动速度，所述手部的移动速度基于多个手部姿势而确定。

14.根据权利要求1所述的系统，其中，所述局部区域内的所述个体对应于与佩戴所述近眼显示器的个体不同的个体。