[发明专利]图像合成装置、图像合成方法和图像合成程序

说明书

技术领域

本技术涉及图像合成装置、图像合成方法和图像合成程序。更具体地，本技术通过控制图像合成来辅助创建具有广视角的高质量合成图像。

背景技术

存在如下的相关技术：其用于在转动或平行移动成像装置的同时合成通过多个成像操作所获得的所拍摄的图像，以创建具有比通过一个成像操作所获得的图像更广的视角的全景图像。例如，日本未审查专利申请No.11-282100通过提取图像的特征点并组合图像从而使得特征点彼此对准来创建全景图像。

当图像被组合以使得其特征点彼此对准时，缝(seam)可能出现在主要的对象上，因为图像之间的缝被确定，而不管用户的意图。因此，在日本未审查专利申请公开No.2008-176430(对应的美国公开：US2008-015962)中，如果用于图像合成的缝出现在由用户所指定的位置中，则该缝可被用户所选的图像覆盖。

发明内容

当全景图像的缝被用户所选的图像覆盖时，由于应当选择覆盖图像，因此，不执行对不带有用于图像合成的在由用户所指定的位置中的缝的全景图像的自动创建。另外，当多个图像被自动合成时，高质量的合成是不容易的。

希望当图像被组合以创建合成图像时提供通过控制多个图像的合成而辅助对带有广视角的高质量合成图像的创建的图像合成装置、图像合成方法和图像合成程序。

根据本技术的实施例，提供了一种图像合成装置，包括对象区域确定单元，该对象区域确定单元基于在成像期间所进行的距离测量所生成的多个点的对象距离信息，确定针对每个所拍摄图像的附近对象的区域；以及图像合成单元，该图像合成单元通过基于附近对象的区域的位置来从每个所拍摄图像中剪切图像并组合针对每个所拍摄图像的剪切图像来创建合成图像。

在本技术中，在由距离测量在成像期间所生成的多个点处的对象距离信息被与预设阈值相比较，并且，基于比较的结果来确定附近对象的区域。当附近对象的区域已经被确定时，图像被剪切，使得附近对象的区域未被分割。当还未确定附近对象的区域时，在中心处的图像被剪切。当附近对象的区域被冗余地呈现在所拍摄的图像中时，在附近对象的区域中的图像被从图像被组合的方向上的位于更靠近中心处的所拍摄图像中剪切出来，以便连续创建合成图像。对象距离信息的相关度被检测，并且，在所拍摄图像中的重复区域基于检测结果被估计。根据所估计的重复区域中的对象距离信息的差，图像被放大或减小。另外，基于对象距离信息，两个连续图像之间的运动向量被检测，并且，基于附近对象区域的位置和运动向量，从已放大或减小的图像中所剪切出的图像被组合以创建合成图像。

根据本技术的另一实施例，提供了一种图像合成方法，包括：基于在成像期间所进行的距离测量所生成的多个点的对象距离信息，确定针对每个所拍摄图像的附近对象的区域；基于附近对象的区域的位置来从每个所拍摄图像中剪切图像；以及组合针对每个所拍摄图像的剪切图像来创建合成图像。

根据本技术的又一实施例，提供了一种让计算机执行用于从多个所拍摄图像创建带有广视角的合成图像的图像合成处理的程序，所述处理包括：基于在成像期间所进行的距离测量所生成的多个点的对象距离信息，确定针对每个所拍摄图像的附近对象的区域；基于附近对象的区域的位置来从每个所拍摄图像中剪切图像；以及组合针对每个所拍摄图像的剪切图像来创建合成图像。

根据本技术的实施例的计算机程序可通过存储介质被以可执行各种程序代码的通用计算机系统的计算机可读形式提供，诸如，光盘、磁盘或半导体存储器或诸如网络之类的通信介质。以计算机可读的形式来提供这种类型的程序使得计算机系统能够根据程序来执行处理。

根据本技术的实施例，基于在成像期间由距离测量所生成的多个点的对象距离信息，在所拍摄图片中的附近对象区域被确定。基于附近对象区域的位置，图像被从所拍摄的图像中剪切出来，并且，已剪切出来的图像被组合，以创建合成图像。因此，不必选择覆盖缝的图像或用所选的图像来覆盖缝，并且，基于附近对象区域的位置，图像被剪切出来，并且然后，被合成，因此可容易地创建带有广视角的高质量合成图像。

附图说明

图1示出了成像装置的结构。

图2示出了带有相位对照像素(phase contrast pixels)的CMOS固态成像设备的结构。

图3示出了在A系列图像和B系列图像之间所导致的移位量(shift amount)和去焦量(defocus amount)之间的关系。

图4示出了图像合成单元的结构。

图5是示出了成像装置的全景成像操作的流程图。