[发明专利]用于提供三维用户界面的方法和系统

说明书

技术领域

本发明一般涉及演示，更特别地涉及多媒体演示。

背景技术

有多种设备使得用户能够访问内容。这些设备中许多回放用户要观看的内容。另外，一些回放设备被配置为这样回放内容，使得对于用户而言，回放似乎是在三维空间中进行的。

发明内容

本发明的若干实施例有利地提供了一些优点，使得装置、系统、方法和过程能够用于允许用户与虚拟环境进行交互。这些实施例中的一些提供了被配置为显示用户界面的装置，其中该装置包括：框架；透镜，安装在该框架上，其中该框架被配置为由用户佩戴以使得该透镜的位置在该用户的视线中；第一相机，在该框架的第一位置处安装在该框架上，其中当用户适当地佩戴该框架时，第一相机的位置在用户的视线内，使得第一相机捕获的图像对应于该用户的视线；检测器，安装在该框架上，其中第二检测器被配置为检测当用户适当佩戴该框架时对应于该用户的视线的检测区域中的一个或多个对象；以及处理器，被配置为：处理从第一相机接收的图像和从该检测器接收的检测数据；至少通过对该图像的处理，检测手相对于虚拟三维(3D)空间的手势，该虚拟三维(3D)空间对应于第一相机的视场和该检测器的检测区域；通过对该图像和该检测数据的处理，识别执行该手势的手的至少一部分在该3D空间中的虚拟X、Y和Z坐标；识别对应于所检测到的手势和手的该部分的三维位置的命令；以及执行该命令。

其它实施例提供用于显示用户界面的系统。这些系统包括：框架；透镜，安装在该框架上，其中该框架被配置为由用户佩戴以使得该透镜的位置在该用户的视线中；第一相机，在该框架的第一位置处安装在该框架上，其中当用户适当地佩戴该框架时，第一相机的位置与用户的视线相符，使得第一相机捕获的图像对应于该用户的视线；第二相机，在该框架的不同于第一位置的第二位置处安装在该框架上，其中当用户适当地佩戴该框架时，第二相机的位置与用户的视线相符，使得第二相机捕获的图像对应于该用户的视线；以及处理器，被配置为：处理从第一相机和第二相机接收的图像；通过对该图像的处理，检测手相对于三维(3D)空间的手势，该三维(3D)空间在第一相机和第二相机的视场中；通过对该图像的处理，识别执行该手势的手的至少一部分在该3D空间中的X、Y和Z坐标；识别虚拟选项，该虚拟选项在检测到手的该手势时虚拟地显示在该3D空间中，并且对应于执行该手势的手的所识别的X、Y和Z坐标，使得该虚拟选项的至少一部分被显示为在用户看来位于该X、Y和Z坐标处；识别对应于所识别的虚拟选项和手的所检测到的手势的命令；以及激活对应于所识别的虚拟选项和手的所检测到的手势的命令。

一些实施例提供方法，包括：在显示三维演示的同时，接收由第一相机捕获的第一图像序列，其中第一相机安装在用户佩戴的框架上，使得当用户佩戴该框架时，第一相机的视场在该用户的视场中；从安装在该框架上的检测器接收检测区域内的一个或多个对象的检测数据，该检测区域对应于用户适当佩戴该框架时该用户的视线；处理第一图像序列；处理该检测器检测的检测数据；通过对第一图像序列的处理，检测预定义的非传感器对象和该非传感器对象的预定义的手势；通过对第一图像序列和该检测数据的处理，识别该非传感器对象的至少一部分相对于虚拟三维(3D)空间的虚拟X、Y和Z坐标，该虚拟三维(3D)空间在第一相机的视场和该检测器的检测区域；识别对应于所检测到的手势和该非传感器对象的虚拟3D位置的命令；以及执行该命令。

附图说明

通过结合下面的附图给出的更具体的描述，本发明的若干实施例的上述和其它方面、特征以及优点将变得清楚。

图1示出了根据一些实施例配置为使得用户能够与虚拟环境进行交互的用户交互系统的简化侧面视图。

图2示出了图1的交互系统的简化俯视图。

图3示出了图1的用户交互系统的简化俯视图，其中用户与3D虚拟环境进行交互。

图4A-C示出了根据一些实施例可用于图1的交互系统的用户佩戴护目镜的简化俯视图。

图5A示出了根据一些实施例的用户交互系统的简化框图。

图5B示出了根据一些实施例的用户交互系统的简化框图，包括护目镜，该护目镜在其透镜上显示多媒体内容。

图6A示出了根据一些实施例观看并与3D虚拟环境进行交互的用户的简化俯视图。

图6B示出了图6A的观看并与3D虚拟环境进行交互的用户的侧视图。

图7示出了根据一些实施例使得用户能够与3D虚拟环境进行交互的过程的简化流程图。