[发明专利]图像处理装置、图像处理方法和程序

说明书

当确定要显示的全景图像数据集合是全周全景图像时，图像处理设备通过执行用于显示的投影处理而生成显示图像数据。换句话说，替代简单地剪切并显示全景图像，本发明能够通过将在全景合成期间投影到曲面的全景图像数据集合投影到与投影中心轴相交的平面从而创建显示图像，显示现实感的图像。

技术领域

本公开涉及图像处理装置、图像处理方法和用于实现这些的程序，并且具体涉及适于全景图像数据的显示的图像处理。

背景技术

引用列表

专利文献1：JP 2010-161520A

如专利文献1中所示，已知从多个图像生成一个全景(panorama)图像的图像处理。

例如，用户在水平扫描相机的同时获得多个捕获的图像(帧图像数据)，并且通过组合它们，可以获得所谓的全景图像。

注意，“扫描(sweep)”指由于为了获得用于全景图像生成的多个帧图像而在成像时对成像装置的旋转运动导致的成像方向运动的操作。例如，在水平方向上移动成像方向的情况下，扫描方向将指向水平方向。

发明内容

技术问题

在为全景图像执行再现和显示的情况下，通常，执行所谓的单视图显示或执行滚动显示。

通过将所有全景图像数据压缩为一个静态图像来显示单视图显示。在此情况下，虽然可以观看整个全景图像，但是由于压缩，将难以成为有魅力的图像。

通过顺序剪切全景图像数据的部分而在滚动的同时显示滚动显示。通过滚动显示，可以在对每个部分更大的屏幕上观看全景图像。

然而，例如，通过简单地顺序剪切投影到圆柱面等上的全景图像数据来显示滚动显示，并且将不一定准确反映从用户视点的场景，如直线部分显著弯曲，例如水平面或建筑物。

另一方面，存在再现技术，其中通过将投影到圆柱面等上的全景图像再投影到平面屏幕，将其设置为显示图像而获得高沉浸感和临场感。这样的再现和显示技术将在说明书中称为“投影显示”。

例如，QuickTime VR。对于虚拟环境导航的基于图像的方法(苹果公司)等是众所周知的。

虽然可以认为当使用这样的投影显示时观看全景图像的显示的用户的满足度可以提高，但是在替代滚动显示简单执行投影显示的以下点存在困难。

虽然为了执行投影显示在创作中可能需要全景图像的视角，但是用户通常很少确切地知道在数字照相机的全景模式下投影的全景图像的视角。例如，在全景图像中存在各种类型的图像，如具有360°视角的全周(full circumference)图像，具有大约120°视角的图像或具有大约180°视角的图像。此外，除了360°视角，由于诸如对准误差、扫描半径或失真像差的影响，用于从全景图像数据获得视角的这种计算将变得不精确，并且将不能获得精确的视角。

这样，仅通过全景图像数据将不能得知视角，并且将不能执行投影显示的创作。例如，为了确保投影显示的视角是已知的，用户可能需要大致估计全景成像时的视角，并且在创作时手动输入视角。这将是对于普通用户困难的操作。此外，当输入视角与实际视角显著不同时，将导致在投影显示图像中出现失真。

由此，从实际使用角度或从显示质量的角度，投影显示将不一定总是最佳的显示系统。

本公开旨在实现一种图像处理以便能够例如通过广泛地假设从专业使用或商用到对于一般消费者的设备，手动并精确地执行全景图像的显示，尤其是高质量的投影显示。

解决问题的技术方案

根据本公开的一种图像处理装置，包括：显示图像生成部分，配置为在要成为显示目标的全景图像数据被判断为全周全景图像的情况下，通过执行显示投影处理来生成显示图像数据。