[发明专利]用于多视点视频编码的参考图像列表管理语法

说明书

本申请是申请日为2007年10月12日、申请号为200780038178.3、发明名称为“用于多视点视频编码的参考图像列表管理语法”的专利申请的分案申请。

相关申请的交叉引用

本申请要求2006年10月13日提交的美国临时申请60/851,863和2006年10月13日提交的美国临时申请60/851,521的优先权，上述两个临时申请在此全文并入作为参考。

技术领域

本发明涉及运动图像(moving pictures)领域，更具体地，涉及参考图像在用于编码视频图像时的排序(ordering)课题。

背景技术

许多帧间编码系统使用参考图像(reference picture)，使用这种参考图像有助于降低编码比特流的大小。这样的结果就是编码效率比仅仅使用帧内编码技术要高。因此，许多编码标准既包含帧内也包含帧间编码技术，以编码一系列移动图像的比特流。在现有技术中，不同类型的参考图像用于编码标准，例如“I”图像，其只使用图像自身内(帧内)的元素进行编码，又例如“B”图像，其通过使用来自图像自身内部的元素和/或来自两个先前参考图像(帧间)的元素进行编码，再例如“P”图像，其通过使用来自图像自身内部的元素和/或来自一个先前参考图像(帧间)的元素进行编码。

当“B”图像或“P”图像被编码和/或解码时，这种图像因而取决于其他参考帧，从而这种图像在解码过程中可以被正确编码或构建。编码/解码系统应当提供某种类型的存储单元(memory location)，从而在其他图像在由参考图像被编码或解码时可以存储这种参考图像。这些图像类型之间具有时间关系。

当考虑其中不同视频图像的多视点(multiple views)需要考虑的视频标准时，这种情况变得更为复杂。例如，图1是多视点编码系统中使用的参考图像结构的示例性实施方式。具体而言，所示结构涉及根据多视点编码(MVC)方案在时间(T0－T100)使用8个不同视点(S0－S7)，所述MVC方案在2006年7月奥地利Klagenfurt的JVT-T208.doc的A.Vetro、Y.Su、H.Kimata、A.Smolic的“Joint Multiview Video Model(JMVM)1.0”中提出。此多视点编码标准基于高级视频编码(AVC)标准(G.Sullivan、T.Wiegand、A.Luthra，“H.264/AVC(ITU推荐标准和ISO/IEC 14496-10(MPEG-4第10部分)高级视频编码)”，Palma de Mallorca，ES18-22，2004年10月)。这两个标准的最大的区别在于AVC不解决对多视点图像的编码而MVC能够解决。

请再参看图1，例如可以看出，当编码在时间T1与视点S1相关联的图像时，需要编码的图像与来自相同视点(时间T0的S1和时间T2的S1)的图像(参考图像)关联，并且需要编码的图像与来自不同视点(时间T1的S0和时间T1的S2)的图像关联。因此，当编码与S1关联的图像时，重要的是要在存储装置(例如可以由硬件、软件或其组合实施的缓存器、寄存器、RAM等)中保存参考图像(时间T0的S1、时间T2的S1、时间T1的S0和时间T1的S2)。

用于存储AVC视频标准中使用的参考图像的编码器和存储装置运算的通用实施方式示于图2中。具体而言，在框图200中公开了编码器205、编码缓存器210和解码图像缓存器(DPB)215。在编码操作(编码或者解码)过程中，由编码器205正在进行编码的图像存在于编码缓存器210中，而先前编码的参考图像存储在解码图像缓存器215中。

但是当需要编码一个需要使用超过两个的参考图像的图像时，当该图像存储在缓存器DPB 215中时，就会产生问题。即DPB 215必须为这种参考图像提供某种类型的组织，以使它们在编码运算过程中可以被编码器205使用。还可以理解，当编码第二图像时，不同的参考图像可能必须由编码器205通过DPB215获得。在时间的情况下(例如AVC)，这种问题非常复杂，但是当编码视频标准(例如MVC)中的图像时当必须考虑不同视点中的参考图像时(如图1所示)，这就变成了需要获得参考图像的问题。

发明内容

本发明能够解决现有技术的上述缺点和不足。本发明涉及一种用于再利用可用的运动信息作为运动估计预测器以进行视频编码的方法和装置。

根据本发明原理的一个方面，提出了一种编码器，其根据来自被解码器解码的图像的信息对存储在存储器中的参考图像进行存储管理操作，其中这种信息与关联于该参考图像的视点信息相关。