[发明专利]进行全周围立体图像的描绘的图像描绘装置、图像描绘方法、图像描绘程序

说明书

技术领域

本发明涉及全周围图像的描绘技术。

背景技术

上述全周围图像的描绘技术是作为街景服务的基础的技术。街景服务是如下服务：在服务器上对在各种道路上的地点拍摄的全景图像进行管理，用户能够通过WEB浏览器等，以360度的全周围全景图像的方式享受任意地点的道路上的风景。通过该街景服务，在旅行目的地的周边状况的事前确认、希望再次回顾旅行后的回忆的情况等下，不是以固定视点观看风景，而能够以任意视点观看风景，所以，具有用户的使用便利性提高这样的优点。作为与街景有关的现有技术，存在以下专利文献所记载的技术。

现有技术文献

专利文献

专利文献1：日本特表2010-531007

发明内容

发明要解决的课题

但是，所述街景服务虽然能够确认全景图像，但是，所显示的影像成为平面视影像。近年来，大画面3D电视机正在普及，如果只能以平面视的方式观看全景图像，则服务明显逊色。

但是，如果为了使街景也对应于3D立体视服务而再次利用立体视照相机对世界中的道路进行拍摄，则需要庞大的时间和劳力，而且，特意拍摄的平面视图像的街景最终并没有用。因此，想到通过平面视-立体视变换而对现有的平面视街景进行立体视化的想法。在这种平面视-立体视化中，存在以下的技术屏障。关于上述绘制，通常不是作为一张墨卡托图像而拍摄的，而是通过结合纵4×横7这样的数量的多个背景图像而生成的。这样，通过结合多个背景图像而得到360度全景图像，当希望使其成为立体视化的对象时，需要对构成360度全景图像的各个图像执行基于深度图像的基于深度图像的绘制。基于深度图像的绘制是如下技术：使图像的各像素的坐标在水平方向位移，以使其具有深度图像所示的进深。这里，当对构成360度全景图像的各个图像进行基于深度图像的位移时，各个图像中的存在于端部的图像的一部分位于图像的显示区域外。这样，与构成360度全景图像的各个图像的边界相当的部分的像素消失，得到存在空白纵筋的360度全景图像。

这使显示品位大幅降低。在作为立体视化对象的影像为墨卡托图像的情况下，不存在图像间的结合边界，所以，不会产生空白的纵筋。但是，当对通过结合多个图像而得到的墨卡托图像实施基于深度图像的绘制时，用于临时存储墨卡托图像的存储器规模增大，具有妨碍产品低价格化的问题。并且，墨卡托图像原本意图粘贴在球体模型上，所以，在粘贴状态下，图像的一个端部和另一个端部相面对，产生边界。该情况下，通过进行基于深度图像的绘制，边界成为没有像素的空白部分，降低显示品位。

如上所述，在根据平面视图像和深度图像生成立体图像的情况下，具有如下课题：由于在立体图像生成过程中产生的图像两端的像素位移，各个图像彼此的无缝性丧失，其结果，以不自然的形式显示在图像彼此的边界上。

本发明的目的在于，提供如下的图像描绘装置：在立体视再现时，不会产生像素的空白部分。

用于解决课题的手段

在背景图像为街景这样的假设下提示了技术课题，但是，该假设只不过是在说明上述技术课题时选择身边的题材，本申请中作为对象的技术课题不限于背景图像为上述街景的例子的情况。结合多个某些图像而成为立体视对象时的视觉上的不匹配的消除全部是本申请的技术课题，在不久的将来，使上述技术在工业产品的领域中实用化时，是从业人员必须直面的技术屏障。

能够解决该课题的图像描绘装置实现与结合图像数据有关的立体视，其特征在于，所述结合图像数据是横向结合了多个背景图像数据而得到的，所述图像描绘装置具有：像素位移单元，对构成结合图像数据的各个背景图像数据实施像素位移，并且实施伴随该像素位移的边界处理，从而得到2个以上的视点纹理；纹理映射单元，在三维建模空间中的立体模型的内侧表面上映射2个以上的视点纹理；以及窗口变换单元，从进行纹理映射后的立体模型中提取分别与2个以上的视点对应的窗口图像，所述像素位移是使构成各个背景图像数据的像素的坐标横向移动的处理，根据与结合图像数据对应的深度图像数据中的像素的进深值决定像素的移动量，所述边界处理是如下处理：提取由于像素坐标的横向移动而从各个背景图像数据的显示范围中露出的像素群，在结合图像数据中横向相邻的其他背景图像数据的端部写入被提取出的露出像素群。

发明效果