[发明专利]图像处理设备、方法和程序

说明书

技术领域

本发明涉及图像处理设备、方法和程序，具体涉及可显示具有更适当的差异的多视点图像的图像处理设备、方法和程序。

背景技术

在现有技术中，已知如下技术：其通过重叠和合成通过在使成像设备在预定方向上摇动的同时利用成像设备捕获而获得的多个静止图像来生成全景图像(例如参见PTL 1)。由于全景图像是通过布置和合成多个静止图像而获得的图像，因此，根据全景图像，比在捕获单个静止图像时要捕获的空间中的区域更宽的区域可被显示作为对象。

此外，在摇动成像设备的同时捕获多个静止图像以获得全景图像的情况下，同一对象有时包括在若干个静止图像中。在这样的情况下，由于不同静止图像中的同一对象是从彼此不同的位置捕获的，因此，这意味着产生了差异或视差。

当这被用于通过利用双凸透镜方案同时显示这些全景图像中的一些或全部来从多个静止图像生成相对于彼此具有差异的多个全景图像时，可显示多视点图像。

这里，多视点图像是如下图像：其中，以随观看显示图像的显示屏幕的位置(即，用户的视点位置)而变化的差异显示同一对象。例如，当按原样使用多个全景图像来创建多视点图像时，显示全景图像，使得分别由用户的右眼和左眼来观察由用户的视点位置确定的这些多个全景图像中的两个全景图像。此时，由于用户观察的两个全景图像具有差异，所以全景图像中的对象立体地呈现给用户。

引用列表

专利文献

PTL 1：日本专利第3168443号

发明内容

技术问题

然而，根据诸如要显示多视点图像的显示设备的屏幕尺寸的观看环境，应在组成多视点图像的各图像之间设置的适当的差异幅度会变化。然而，利用上述技术，无法获得具有根据观看环境的适当差异的多视点图像。

考虑到以上情形做出本发明，并且因此本发明的目的是使得可获得具有适合观看环境的更适当的差异的多视点图像。

问题的解决方案

根据本发明的第一方面的图像处理设备是如下的图像处理设备：其基于通过在移动成像装置的同时利用成像装置进行捕获而获得的多个捕获图像，生成用于多视点图像的生成、且相对于彼此具有差异的多个合成图像，并且该图像处理设备包括：带形区域确定装置，用于基于指示多视点图像的观看环境的信息，针对每个合成图像来确定每个捕获图像中的带形区域，其中从该带形区域提取用于每个合成图像的生成的图像；合成图像生成装置，用于通过从捕获图像提取带形区域中的图像并合成图像来生成每个合成图像；以及多视点图像生成装置，用于通过使用合成图像来生成多视点图像，其中，立体地显示其差异随用户的视点位置变化的对象。

带形区域确定装置可被配置成确定带形区域的各个位置，使得每个捕获图像中的带形区域具有由用于多视点图像的显示目的地的屏幕尺寸确定的位置关系，该显示目的地由指示观看环境的信息来指示。

带形区域确定装置可被配置成确定带形区域的位置，使得在每个捕获图像中，对于位于更接近每个捕获图像的边缘的带形区域，彼此相邻的带形区域之间的距离变得较短。

根据本发明的第一方面的图像处理方法或程序是如下的图像处理方法或程序：其基于通过在移动成像装置的同时利用成像装置进行捕获而获得的多个捕获图像，生成用于多视点图像的生成、且相对于彼此具有差异的多个合成图像，并且该图像处理方法或程序包括步骤：基于指示多视点图像的观看环境的信息，针对每个合成图像来确定每个捕获图像中的带形区域，其中从该带形区域提取用于每个合成图像的生成的图像；通过从捕获图像提取带形区域中的图像并合成图像来生成每个合成图像；以及通过使用合成图像来生成多视点图像，其中，立体地显示其差异随用户的视点位置变化的对象。

在本发明的第一方面中，在基于通过在移动成像装置的同时利用成像装置进行捕获而获得的多个捕获图像，生成用于多视点图像的生成、且相对于彼此具有差异的多个合成图像的图像处理中，基于指示多视点图像的观看环境的信息，针对每个合成图像来确定每个捕获图像中的带形区域，其中从该带形区域提取用于每个合成图像的生成的图像；通过从捕获图像提取带形区域中的图像并合成图像来生成每个合成图像；以及通过使用合成图像来生成多视点图像，其中，立体地显示其差异随用户的视点位置变化的对象。