[发明专利]图像处理设备、成像设备、图像处理方法和程序

说明书

技术领域

本发明涉及图像处理设备、成像设备、图像处理方法和程序，并且，更具体地，涉及执行使用在移动照相机的同时所捕获的多个图像来生成用于显示三维图像（3D图像）的图像的处理的图像处理设备、成像设备、图像处理方法和程序。

背景技术

为了生成三维图像（也称为3D图像或立体图像），需要从互不相同的视点捕获图像，换句话说，左眼图像和右眼图像。从互不相同的视点捕获图像的方法主要分为两种方法。

第一种技术是使用多个照相机单元从不同视点对被摄体同时成像的技术，即，使用所谓的多镜头照相机的技术。

第二种技术是使用单个照相机单元通过移动成像设备从互不相同的视点连续地捕获图像的技术，即，使用所谓的单镜头照相机的技术。

例如，用于上述第一种技术的多镜头照相机系统具有这样的配置，其中，各镜头被包括在彼此分开的位置处，并且被摄体可以从互不相同的视点被同时拍摄。但是，这样的多镜头照相机系统需要多个照相机单元，因此，存在该照相机系统价格昂贵的问题。

与此相反，用于上述第二种技术的单镜头照相机系统可以具有包括一个照相机单元的配置，其类似于现有技术中的照相机的配置。在这样的配置中，来自互不相同的视点的图像在移动包括一个照相机单元的照相机的同时被连续地捕获，并通过使用多个捕获的图像来生成三维图像。

如上所述，在使用单镜头照相机系统的情况中，通过使用类似于现有技术中的照相机的一个照相机单元，可以实现相对低成本的系统。

另外，作为公开了从在移动单镜头照相机的同时捕获的图像获取被摄体的距离信息的技术的现有技术中的技术，存在NPL1“Acquiring Omni-directional Range Information(The Transactionsof the Institute of Electronics,Information and CommunicationEngineers,D-II,Vol.J74-D-II,No.4,1991)”。另外，还在NPL2“Omni-Directional Stereo,IEEE Transaction On Pattern Analysis AndMachine Intelligence,VOL.14,No.2,February1992”中公开了与NPL1相同的内容的报告。

在NPL1和NPL2中，公开了一种技术，其中，照相机被固定地安装在与旋转台的旋转中心分开预定距离的圆周上，并且，通过在旋转旋转基座的同时连续地捕获图像，使用通过两个垂直狭缝获取的两个图像来获取被摄体的距离信息。

另外，在PTL1（日本未审专利申请公开No.11-164326）中，与NPL1和NPL2中公开的配置类似，公开了这样一种配置，其中，在照相机被安装为与旋转台的旋转中心分开预定距离并且被旋转的同时捕获图像，并且，通过使用通过两个狭缝获取的两个图像，获取用于显示三维图像的左眼全景图像和右眼全景图像。

如上所述，在现有技术中的技术中，公开了可以通过使用当照相机被旋转的同时通过狭缝获取的图像来获取用于显示三维图像的左眼图像和右眼图像。

同时，已知一种技术，其通过在移动照相机的同时捕获图像并连接多个捕获图像来用于生成全景图像，即，水平长的二维图像。例如，在PTL2（日本专利No.3928222）、PTL3（日本专利No.4293053）等中，公开了用于生成全景图像的技术。

如上所述，在生成二维全景图像时，使用在移动照相机的同时获取的多个捕获图像。

在上述的NPL1、NPL2和PTL1中，描述了使用由诸如全景图像生成处理的捕获处理所捕获的多个图像通过裁剪出和连接预定区域的图像来获取作为三维图像的左眼图像和右眼图像的原理。

但是，在通过从使用在照相机移动时捕获的多个捕获图像裁剪出预定区域的图像并连接这些图像来生成作为三维图像的左眼图像和右眼图像或二维全景图像的情况中，例如，通过用户使用其手进行的照相机的摇摆操作，存在这样一种情况，其中，根据用户执行的照相机的移动的形式不能生成用于显示三维图像的左眼图像和右眼图像。另外，还存在不能生成二维全景图像的情况。结果，无意义的图像数据作为记录数据被记录在介质上，并且可能发生这样的情形，其中，在再现时再现没有依照用户意图的图像，或者图像不能被再现。

引文列表

专利文献

[PTL1]JP-A-11-164326

[PTL2]日本专利No.3928222

[PTL3]日本专利No.4293053

非专利文献