[发明专利]回放装置和方法以及生成装置和方法

说明书

本公开内容涉及回放装置和方法以及生成装置和方法，其被配置成使得能够以使恶心的发生率最小化来放大或缩小显示的图像。回放装置包括顶点数据变换单元，在选择放大或缩小完整球面图像时，顶点数据变换单元生成用于放大和缩小的3D模型。本公开内容适用于例如下述回放装置等，该回放装置根据观看者观看完整球面图像的方向来生成透视投影的图像作为显示图像。

技术领域

本公开内容涉及回放装置和方法以及生成装置和方法。具体地，本公开内容涉及能够在防止发生晕动症的同时执行图像的放大/缩小显示的回放装置和方法以及生成装置和方法。

背景技术

通过将入射在一个点上的所有方向上的光线记录为诸如RGB的像素值，获得允许环视任何方向的整个天球图像或全向图像。该像素值通常被记录为诸如等量矩形(equirectangular)投影的平面矩形图像。在回放时，该平面矩形图像被粘贴到虚拟单位球面，并且执行从球体的中心环视的呈现，这使得能够再现原始光线方向和RGB值。

由于上述全向图像是通过记录入射在一个点上的光线而获得的，因此无法再现来自不同视点的图像，并且只能再现以球体的中心为基准的旋转运动。作为自由度，由于在总共六个自由度(包括与旋转对应的三个自由度偏航、俯仰和滚转以及与运动对应的三个自由度x、y和z)中，只能实现旋转分量的三个自由度，因此在某些情况下它称为三自由度(3DoF)全向图像。

显示此3DoF全向图像的方式的示例包括：将3DoF全向图像显示在诸如电视机的固定显示器上并且观看/收听同时使用控制器来改变显示方向的方式；将3DoF全向图像显示在手持的移动终端的屏幕上同时基于从终端的内置陀螺仪传感器获得的姿态信息来改变显示方向的方式；或者将3DoF全向图像显示在安装在头部上的头戴式显示器(在下文中也称为HMD)上同时在头部的运动中反映显示方向的方式。

由于3DoF全向图像不具有来自图像中的一个点的运动的自由度，因此无法执行使图像看起来更近的操作。然而，需要允许像望远镜那样通过放大图像来进行观看，以便能够识别细节。

在电视机、移动终端等的平面显示器中，可以通过改变显示视角(或视野(FOV))来执行放大操作。由于在通过普通的平面显示器进行的图像观看/收听中，通常拍摄视角和显示视角可能不一定彼此一致，因此即使在改变显示视角的情况下也减少感到不适。

另一方面，由于HMD被佩戴在头部上，因此在观看/收听期间的显示视角基本上是固定的。另外，通常的HMD配备有用于检测观看者/收听者的头部运动的传感器，并且HMD执行通过反映观看者/收听者的视线或位置而获得的图像显示。在3DoF全向图像中，只有旋转运动是可再现的，但是通过将该旋转运动与头部的旋转运动精确匹配，可以体验到仿佛进入了虚拟世界一样的沉浸感。

在该描述中，在通过以与平板显示器相同的方式简单地改变视角并且放大通过HMD观看的图像来对该图像执行放大/缩小操作(缩放操作)的情况下，头部的旋转角度与图像的旋转角度不匹配。在一个示例中，图像在放大时看起来比头部的旋转移动得快了图像放大尺寸。在许多情况下，这引起不适，这导致称为VR晕动症等的令人不快的感觉。

在一个示例中，专利文献1和2公开了改变HMD中的显示图像的视角的示例。

引用列表

专利文献

专利文献1：日本专利申请公开第2015-125502号

专利文献2：日本专利申请公开第2016-24751号

发明内容

本发明要解决的问题

然而，由于专利文献1和2没有教导针对头部的旋转角度与图像的旋转角度不匹配的现象的任何对策，因此无法从根本上解决晕动症的问题。

鉴于这样的情况而作出本公开内容，并且本公开内容旨在能够执行防止发生晕动症的图像的放大/缩小显示。