[发明专利]图像处理装置以及图像处理方法

说明书

技术领域

本发明涉及图像处理装置以及图像处理方法，尤其涉及利用表示以第一视点拍摄的输入图像中的被摄体的深度的深度信息，来生成以与第一视点不同的多个第二视点看到该输入图像时的图像的图像处理装置。

背景技术

近些年，用户对以摄像装置拍摄的图像进行编辑的情况越来越多。例如，用户通过GUI(Graphical User Interface：图形用户界面)来对图像内的一部分区域进行指定，从而能够使映现在该一部分区域的被摄体的像放大等(例如，参照专利文献1)。

但是，在通常的变焦功能中，被摄体的像只是按照放大倍率放大或者缩小，而不能得到实际上使相机接近被摄体而拍摄的像。作为得到实际上接近被摄体的效果的方法，例如专利文献2所记载的方法。根据专利文献2，通过对从多个方向拍摄被摄体而得到的多个输入图像进行合成，从而生成三维模型。在被生成的三维模型中，通过对来自任意的视点位置的投影进行变换，来生成被摄体像。通过这种方法，能够得到就像使相机接近被摄体而拍摄的被摄体像，或者就像从与实际的相机不同的方向来拍摄的被摄体像。

(现有技术文献)

(专利文献)

专利文献1  日本  特开平9-102945号公报

专利文献2  日本  特开2002-290964号公报

发明概要

发明要解决的问题

在这种装置中，希望能够提高视点变更后被显示的图像的画质。

发明内容

因此，本发明的目的在于提供一种能够提高视点变更后被显示的图像的画质的图像处理装置。

用于解决问题的手段

本发明的一个实施方式所涉及的图像处理装置具备：数据获得部，获得从第一视点拍摄的输入图像以及表示所述输入图像中的被摄体的深度的深度信息；视点变换部，利用所述深度信息，来生成多个第一变换图像，该多个第一变换图像是从与所述第一视点不同的多个第二视点看到所述输入图像时的图像；以及空白区域解析部，对所述多个第一变换图像的每一个中包含的空白区域进行解析，来生成空白信息，该空白信息按照所述多个第二视点的每一个，示出与该第二视点对应的所述第一变换图像中包含的所述空白区域的大小，所述空白区域是指，所包含的像素是在所述输入图像内不存在对应的像素的像素。

并且，这些概括性的或具体的实施方式能够以系统、方法、集成电路、计算机程序或计算机能够读取的CD-ROM等の记录介质来实现，也可以通过对系统、方法、集成电路、计算机程序以及记录介质进行任意的组合来实现。

发明效果

本发明能够提供一种能够提高视点变更后被显示的图像的画质的图像处理装置。

附图说明

图1是实施方式1所涉及的图像处理装置的方框图。

图2是实施方式1所涉及的图像处理方法的流程图。

图3是实施方式1所涉及的图像处理装置的方框图。

图4是实施方式1所涉及的图像处理方法的流程图。

图5是用于说明实施方式1所涉及的视点变换处理的图。

图6是用于说明实施方式1所涉及的视点变换处理的图。

图7是用于说明实施方式1所涉及的视点变换处理的图。

图8示出了实施方式1所涉及的视点变换后的空白区域的一个例子。

图9是实施方式1所涉及的空白区域解析处理的流程图。

图10示出了实施方式1所涉及的空白分配图的一个例子。

图11示出了实施方式1所涉及的空白分配图的其他的例子。

图12是实施方式2所涉及的图像处理装置的方框图。

图13是实施方式2所涉及的图像处理方法的流程图。

图14是实施方式3所涉及的图像处理装置的方框图。

图15A是用于说明实施方式3所涉及的路径选择处理的图。

图15B是用于说明实施方式3所涉及的路径选择处理的图。

图15C是用于说明实施方式3所涉及的路径选择处理的图。

图15D是用于说明实施方式3所涉及的路径选择处理的图。

图16A是示出实施方式所涉及的摄像装置的一个例子的外观图。

图16B是示出实施方式所涉及的摄像装置的一个例子的外观图。

具体实施方式

(成为本发明的基础的见解)

本发明人员从以往的技术中发现了以下的问题。