[发明专利]使用多层表现的图像处理方法和设备

说明书

本申请要求2011年12月26日提交到韩国知识产权局的第10-2011-0142431号韩国专利申请的优先权利益，该申请的公开通过引用合并于此。

技术领域

一个或多个示例实施例涉及一种用于处理图像的方法和设备，更具体地，涉及一种可使用多层表现来渲染视图的图像处理方法和设备。

背景技术

三维(3D)成像设备需要对用户提供在与输入视图的视点分离的视点观看的图像。因此，3D成像设备可基于输入视图来产生在与输入视图的视点不同的视点观看的输出视图。

通常，由于网络带宽限制、图像捕捉费用等，将有限数量的输入视图提供给图像处理设备。为了对观看者提供在多个视点观看的图像，可通过使用输入示图进行视图内插或视图外插或者视图内插和视图外插两者来产生在与输入视图的视点不同的视点观看的输出视图。

视图内插表示产生在输入视图的视点之间的视点观看的输出视图。视图外插表示产生在输入视图的视点之外的视点观看的输出视图。

发明内容

通过提供一种处理图像的方法来实现前述和/或其它方面，所述方法包括：使用至少一个输入视图产生包括关于场景的信息的参考视图的多层表现，并使用产生的多层表现产生在输出视点观看的输出视图。这里，所述至少一个输入视图中的每一个可相应于在场景的预定视点观看的视图。所述至少一个输入视图中的每一个可包括图像以及与图像相关联的深度图。多层表现可包括基于所述至少一个输入视图中的每一个的图像和深度图产生的至少一个层。

所述图像处理方法还可包括：对多层表现的至少一个层进行扩展。

可在这样的范围之内对所述至少一个层中的每个层进行扩展，在所述范围中，在所述至少一个层中的具有大于所述至少一个层中的每个层的深度值的深度值的层未被遮挡。

从位于层的端部的像素开始，可基于逐像素迭代地确定所述至少一个层是否将被扩展。

在所述至少一个层中的针对参考视图的预定水平线具有最大深度值的层可具有所述预定水平线上的所有区域的颜色信息。

产生多层表现的步骤可包括：通过将所述至少一个输入视图中的每一个的图像投射到参考视图上来产生所述至少一个层，并合并产生的至少一个层中的相互影响的层。

产生所述至少一个层的步骤可包括：选择所述至少一个输入视图中的第一输入视图的第一位置，通过将选择的第一位置投射到参考视图上来计算参考视图中的第二位置和深度，并将新的层添加到第二位置和深度。

添加的层的颜色值可与第一位置的颜色值相同。

相互影响的层的深度值之间的差可小于或等于预定阈值。

合并的步骤可包括：选择第一参考视图中的第一位置，并在第一位置将包括在相互影响的层中的关于第一位置的信息合并为单个层。

产生输出视图的步骤可包括：通过将所述至少一个层中的每个层投射到输出视图上来计算所述至少一个层中的每个层在输出视图中的位置，并针对输出视图中的每个位置，将所述至少一个层中具有最小深度值的层的颜色确定为计算的位置的颜色。

当在多层表现中彼此邻近的第一像素和第二像素分别包括在第一层和第二层中时，将第一像素投射到输出视图的第一位置上，将第二像素投射到输出视图的第二位置上，并可基于第一像素的颜色和第二像素的颜色之间的内插来确定位于第一位置和第二位置之间的像素的颜色。

通过提供一种用于处理图像的装置来实现前述和/或其它方面，所述设备包括：多层表现产生单元，使用至少一个输入视图产生包括关于场景的信息的参考视图的多层表现；输出视图产生单元，使用产生的多层表现产生在输出视点观看的输出视图。这里，所述至少一个输入视图中的每一个可相应于在场景的预定视点观看的视图。所述至少一个输入视图中的每一个可包括图像以及与图像相关联的深度图。多层表现可包括基于所述至少一个输入视图中的每一个的图像和深度图产生的至少一个层。

所述图像处理设备可包括：层扩展单元，对多层表现的至少一个层进行扩展。

多层表现产生单元可通过将所述至少一个输入视图中的每一个的图像投射到参考视图上来产生所述至少一个层，并可合并产生的至少一个层中的相互影响的层。

多层表现产生单元可通过选择所述至少一个输入视图中的第一输入视图的第一位置，通过将选择的第一位置投射到参考视图上来计算参考视图中的第二位置和深度，并将新的层添加到第二位置和深度，来产生所述至少一个层。

多层表现产生单元可通过选择第一参考视图中的第一位置，并在第一位置将包括在相互影响的层中的关于第一位置的信息合并为单个层，来合并相互影响的层。