[发明专利]一种立体视频渲染方法及装置

说明书

技术领域

本发明涉及图像处理技术领域，特别涉及一种立体视频渲染方法及装置。

背景技术

深度图在立体视频采集、后期制作以及视频二维转三维中都扮演着极其重要的角色。在现有的技术水平下，人们已经有多种渠道可以获得二维视频所对应的深度图，但是在立体视频最终呈现给观众的时候，仍需要有较高质量的不同视角的图像，而利用深度图生成不同视角的图像这一过程，一般称之为基于深度图的立体视频渲染。

传统的基于深度的立体视频渲染一般包含以下几个步骤：1、根据深度值计算视差值2、根据视差值计算图像的正向坐标3、根据正向坐标对原图进行像素搬移生成目标图像4、对目标图像中存在的空洞进行检测并填补。

传统的立体视频渲染方法的核心是计算正向坐标并对原图按照正向坐标进行像素搬移，其搬移过程如图1所示。图1中，A′表示原图中的某行像素，B'表示原图中的某行像素经过搬移后的结果，即渲染后的目标图中的某行像素。其中A′中每个像素点上的数字代表了该像素的正向坐标，在渲染过程中，将原图中的该像素按照其正向坐标的指向，复制到目标图的相应位置。由于深度图的不平滑，很容易造成B′中出现空洞。而且对于不同的深度图，空洞出现的位置和大小都不相同。当B′中出现空洞后，一般需要进行空洞检测和空洞填补，但由于空洞出现的随机性，空洞检测和填补的这一步骤在软件和硬件上实现时都需要消耗相当一部分的计算时间和计算资源。

发明内容

本发明旨在至少解决上述技术问题之一。

为此，本发明的一个目的在于提出一种无需空洞填补、计算量较小的立体视频渲染方法。

本发明的另一目的在于提出一种无需空洞填补、计算量较小的立体视频渲染装置。

为了实现上述目的，根据本发明第一方面的立体视频渲染方法包括以下步骤：A.输入深度图和视频同步信号，获取深度图中像素(i，j)的深度值D_(i，j)，其中i为行坐标，j为列坐标；B.根据深度图，逐行计算所有像素的反向坐标；以及C.根据所有像素的反向坐标，对视频同步信号进行采样取值，以获得立体视频渲染结果，并输出立体视频渲染结果。

在本发明立体视频渲染方法的一个实施例中，步骤B进一步包括：B1.根据第i行第一列像素(i,1)的深度值D(i,1)计算第i行全局偏移量Offset_i；和B2.根据第i行各个元素(i，j)的深度值D(i，j)和第i行全局偏移量Offset_i迭代地计算第i行各个元素(i，j)的反向坐标C(i，j)。

在本发明立体视频渲染方法的一个实施例中，第i行全局偏移量Offset_i的计算公式为：Offset_i=-D_(i，1)*discale，其中discale为视差调节参数。

在本发明立体视频渲染方法的一个实施例中，步骤B2进一步包括：B21.根据第i行全局偏移量Offset_i，计算第i行第一列像素(i,1)的反向坐标C_(i，1)；和B22.根据第i行中第j-1列像素的反向坐标C_(i，j-1)，第i行中第j列像素的深度值D_（i，j)，以及第i行全局偏移量Offset_i，计算第i行中第j列像素的反向坐标C_(i，j)。

在本发明立体视频渲染方法的一个实施例中，第i行第一列像素的反向坐标C_(i，1)的计算公式为：C_(i,1)＝-Offset_i。

在本发明立体视频渲染方法的一个实施例中，第i行中第j列像素的反向坐标C_(i，j）的计算公式为：

若j-discale*D_(i，j)+Offset_i<C_(i，j-1)则：C_（i，j）=C_(i，j-1)+1-S；

若C_(i，j-1)<j-discale*D_(i，j)+Offseti<C_(i，j-1)+M，则：