[发明专利]头戴式显示器以及减少所连接的远程显示器中视觉诱发运动疾病的方法

说明书

提供了一种头戴式显示器(HMD)(100)，包括：相机(101)，被配置为以第一视场(FoV)(111)捕捉真实世界场景的视频；网络接口电路(102)，被配置为将视频流式传输到接收显示设备(140)；以及处理装置(103)，可操作用于生成真实世界场景的3D模型，并使用比第一FoV(111)宽的第二FoV从3D模型生成视频。处理装置(103)还可操作用于估计相机(101)的运动，并且如果所估计的相机(101)的运动满足指示快速运动的一个或多个条件，则将所生成的视频流式传输到接收显示设备(140)，否则将所捕捉的视频流式传输到接收显示设备(140)。还提供了一种由HMD执行的方法、相应的计算机程序以及相应的计算机可读存储介质。

技术领域

本发明涉及头戴式显示器(HMD)、由HMD执行的方法、相应的计算机程序和相应的计算机可读存储介质。

背景技术

头戴式显示器(HMD)或类似设备可用于视觉远程指导应用。例如，访问站点以便为无线电基站提供服务的支持工程师可能会佩戴HMD，该HMD包括前置相机，该相机捕捉该支持工程师正在查看的物理现实世界场景的视频，例如，无线电基站机柜。HMD可以用于向支持工程师显示相关文档，同时将所捕捉的视频流式传输到远程位置(例如，网络运营中心(NOC))，在远程位置处，由指导和/或协助支持工程师的专家查看该视频。

由于HMD中包括的相机的视野(FoV)有限，因此观看由HMD相机捕捉的视频的人仅具有由支持工程师访问的站点的有限FoV。特别是在放大HMD相机以提供要服务设备的特写视图的情况下。

由于所捕捉的视频的有限FoV，观看所捕捉的视频的人可能经受视觉诱发运动疾病(VIMS)。特别是在HMD相机快速移动的情况下，例如，在支持工程师旋转他/她的头部或快速改变位置的情况下。通常，VIMS是由可见但未感觉到的运动引起的。由于有限的FoV，视频仅捕捉到真实世界场景中视觉参考点的子集。

发明内容

本发明的目的是提供针对以上技术和现有技术的改进替代。

更具体地，本发明的目的是提供用于视觉远程指导应用的改进的解决方案。特别是，本发明的目的是提供用于减轻VIMS风险的视觉远程协作的解决方案。

通过如独立权利要求所定义的本发明的不同方面来实现本发明的这些目的和其它目的。从属权利要求表征本发明的实施例。

根据本发明的第一方面，提供了一种HMD。HMD包括被配置为以第一FoV捕捉真实世界场景的视频的相机、被配置为将视频流式传输到接收显示设备的网络接口电路以及处理装置。处理装置可操作用于生成真实世界场景的3D模型，并使用比第一FoV宽的第二FoV从该3D模型生成视频。处理装置还可操作用于估计相机的运动，并且如果所估计的相机的运动满足指示快速运动的一个或多个条件，则将所生成的视频流式传输到接收显示设备，否则，将所捕捉的视频流式传输到接收显示设备。

根据本发明的第二方面，提供了一种由HMD执行的方法。该方法包括：使用包括在HMD中的相机以第一FoV捕捉真实世界场景的视频，生成真实世界场景的3D模型，以及使用比第一FoV宽的第二FoV从3D模型生成视频。该方法还包括：估计相机的运动，并且如果所估计的相机的运动满足指示快速运动的一个或多个条件，则使用包括在HMD中的网络接口电路将所生成的视频流式传输到接收显示设备，否则，使用网络接口电路将所捕捉的视频流式传输到接收显示设备。

根据本发明的第三方案，提供了一种计算机程序。计算机程序包括计算机可执行指令，当该计算机可执行指令在HMD中包括的处理单元上执行时，使得HMD执行根据本发明的第二方面的实施例的方法。

根据本发明的第四方面，提供了一种计算机可读存储介质。计算机可读存储介质具有存储在其上的根据本发明的第三方面的计算机程序。

本发明利用如下理解：如果相机快速移动，则通过流式传输所生成的缩小视频而不是所捕捉的视频来减轻由HMD的实施例流式传输的视频的观看者经受VIMS的风险。