[发明专利]兼容的深度依赖编码方法

说明书

交叉引用

本发明主张在2013年4月12日提出的申请号为PCT/CN2013/074165、标题为“Stereo Compatibility High Level Syntax”的PCT专利申请的优先权。因此在全文中合并参考该PCT专利申请案。

技术领域

本发明是有关于三维视频编码，特别是有关于在三维视频编码中利用深度依赖信息的系统和不利用深度依赖信息的系统之间的兼容性。

背景技术

三维(Three-dimensional,3D)电视为近年来的技术发展趋势，并且三维电视给观众带来震撼的视觉体验。多视点视频为捕获和渲染3D视频的技术。多视点视频通常通过同时利用多个摄影机捕获的场景而产生，其中适当放置多个摄影机的位置，以使得每一个摄影机自一个视点捕获场景。具有与视点相关的大量视频序列的多视点视频意味着大量的数据。相应地，多视点视频需要大量的存储空间来存储及/或较高的带宽来传输。因此，已开发多视点视频编码技术降低需要的存储空间或传输带宽。一种直接的方法是对每一个单一视点视频序列简单地应用现有的视频编码技术，而不顾不同视点之间的任何关联。这样的编码系统的效率十分低。

为改善多视点视频编码的效率，通常多视点视频编码技术利用视点间冗余。在两个视点之间的视差通过两个各自的摄影机的位置和角度来产生。由于所有的相机自不同的视点捕获相同的场景，多视点视频数据包含大量的视点间冗余。为利用视点间冗余，利用视差向量的编码工具被开发以用于高效率视频编码(3D-HEVC)和3D先进视频编码(3D-AVC)。举例来说，后向视点合成预测(Backward View Synthesis Prediction,BVSP)和深度导向的相邻区块视差向量(Depth-oriented Neighboring Block Disparity Vector,DoNBDV)已用于改善3D视频编码的编码效率。

在深度导向的相邻区块视差向量处理利用相邻区块视差向量(Neighboring Block Disparity Vector,NBDV)处理以得到视差向量。相邻区块视差向量推导过程如下所示。视差向量的推导基于当前区块的相邻区块，该相邻区块包括如图1A所示的空间相邻区块和如图1B所示的时间相邻区块。空间相邻区块集包括对角穿过当前区块的左下角的位置(即，区块A0)、相邻于当前区块的左下侧的位置(即，区块A1)、对角穿过当前区块的左上角的位置(即，区块B2)、对角穿过当前区块的右上角的位置(即，区块B0)、以及相邻于当前区块的右上侧的位置(即，区块B1)。如图1B所示，时间相邻区块集包括在时间参考图片中当前区块中心的位置(即，区块B_CTR)、以及对角穿过当前区块的右下角的位置(即，区块RB)。仅当自时间区块RB的视差向量不可用时，使用时间区块B_CTR。相邻区块配置描述了空间和时间相邻区块用于得到NBDV的示例。也可以使用其他空间和时间相邻区块来得到NBDV。举例来说，对于时间相邻集来说，在时间参考图片的当前区块中的其他位置(例如，右下角区块)可也被使用，以代替中心位置。此外，与当前区块同位(collocate)的任意区块可包括于时间区块集中。一旦具有视差向量的区块被识别，检查过程将终止。用于图1A中的空间相邻区块的示范性搜索顺序可为(区块A1,区块B1,区块B0,区块A0,区块B2)。用于图1B中的时间相邻区块的示范性搜索顺序可为(区块RB,区块B_CTR)。空间和时间相邻集可以不同，以用于不同模式或不同的编码标准。在本揭露书中，NBDV可称为基于相邻区块视差向量过程得到的视差向量。当没有歧义时，NBDV也可称为相邻区块视差向量过程。

深度导向的相邻区块视差向量的过程通过自深度图提取更准确的视差向量(在本揭露书中称为改善的视差向量)来加强NBDV。自在相同存取单元中的已编码的深度图的深度区块被首先得到并用作当前区块的虚拟深度。举例来说，在常见的测试条件下编码视点1中纹理的时候，视点0中的深度图已被编码并可用。因此，编码视点1中的纹理可受益于视点0中的深度图。估计的视差向量可自图2所示的虚拟深度图提取。整体流程如下所示：

1.使用得到的视差向量(240)，该得到的视差向量基于用于当前区块(210)(在图中简称为CB)的NBDV而得到。得到的视差向量通过将得到的运动向量(240)与当前区块位置210’(如视点0中的虚线框所示)相加来确定已编码纹理视图的对应区块(230)的位置。