[发明专利]图像生成装置和图像生成方法

说明书

技术领域

本发明涉及一种图像生成装置和方法。具体地，本发明涉及一种用于生成合成图像的装置和方法。

背景技术

数码静止相机和数码视频摄像机广泛流行，并且拾取的静止画面或运动画面被存储到计算机中、并被读取或处理或显示在游戏机或电视(TV)系统的屏幕上的机会正在增加。此外，还流行将拾取的运动画面上传到互联网的发帖网站，以及将该运动画面分享给不同的相机用户。

有些数码相机能够拾取全景图像，并且容易地拾取具有宽视角的全景图像已成为可能。还经常利用一种软件工具，用于通过将由数码相机拾取的、图像拾取方向连续变化的多个图像粘贴在一起来生成全景图像。

此外，诸如具有相机的便携电话机的便携设备是可得的，其中，提供了全景图像拾取模式或用于合成全景图像的应用，并且当便携设备的倾斜连续变化时，可以拾取多个图像并将该多个图像自动合成为全景图像。

【引用列表】

【专利文献】

【专利文献1】

JP2011-76249A

发明内容

【技术问题】

然而，如果使用数码相机、具有相机的便携设备、或类似设备执行全景图像拾取，则由于相机抖动、旋转轴偏移等可能无法拾取准确的全景图像，并且可能无法成功地执行图像匹配，从而导致在合成的全景图像中出现错误。

鉴于上述问题而作出本发明，并且本发明的一个目的是提供一种能够准确地生成合成图像的技术

【问题的解决方案】

为了解决上述问题，本发明的一个模式的图像生成装置包括：特征点提取单元，被配置为在使用内置于便携设备的相机拾取的、并且具有彼此不同的摇翻角或仰角的多个分量图像的重叠区域中提取特征点；自身位置估计单元，被配置为同时在相机位置彼此偏移的两个分量图像中估计所述特征点的三维坐标值和所述相机位置的三维坐标值，所述特征点的三维坐标值和所述相机位置的三维坐标值彼此相关联；以及合成图像生成单元，被配置为基于所估计的相机位置的三维坐标值，调整所述分量图像的特征点的三维坐标值以校正所述分量图像，并组合具有彼此不同的摇翻角或仰角的多个分量图像以生成合成图像。

本发明的另一模式是一种图像生成方法。该方法包括：特征点提取步骤，在使用内置于便携设备的相机拾取的、并且具有彼此不同的摇翻角或仰角的多个分量图像的重叠区域中提取特征点；自身位置估计步骤，同时在相机位置彼此偏移的两个分量图像中估计所述特征点的三维坐标值和所述相机位置的三维坐标值，所述特征点的三维坐标值和所述相机位置的三维坐标值彼此相关联；以及合成图像生成步骤，基于所估计的相机位置的三维坐标值，调整所述分量图像的特征点的三维坐标值以校正所述分量图像，并组合具有彼此不同的摇翻角或仰角的多个分量图像以生成合成图像。

还应注意，上述组件的任意结合以及在方法、装置、系统、计算机程序、数据结构、记录介质等之间变换的本发明的各种表示可有效地作为本发明的模式。

【本发明的有益效果】

利用本发明，可以准确地生成合成图像。

附图说明

【图1】

图1(a)和1(b)是用于全景图像拾取的便携终端的外观图。

【图2】

图2是示出便携终端的倾斜的视图。

【图3】

图3(a)和3(b)是示出便携终端的方位(orientation)的视图。

【图4】

图4(a)至4(d)是示出当使用便携终端的后侧相机拾取全景图像时的图像拾取方向的视图。

【图5】

图5(a)和5(b)是示出相机的方位角θ和相机的仰角(elevation angle)φ的视图。

【图6】

图6(a)至6(c)是示出当便携终端的后侧相机的初始位置在方位角θ的方向时所拾取的全景图像的视图。

【图7】

图7(a)至7(c)是示出当后侧相机的仰角φ＝60度时所拾取的全景图像的视图。

【图8A】

图8A是示出将多个图像彼此连接以生成全景图像的方法的视图。

【图8B】

图8B是示出将多个图像彼此连接以生成全景图像的另一法的视图。

【图9】

图9是全景图像生成装置的功能框图。

【图10】

图10是示出全景图像的图像拾取过程的流程图。

【图11】