[发明专利]图像处理设备和图像处理方法

说明书

技术领域

本发明涉及图像处理设备和图像处理方法，具体而言涉及当形成立体图像的多视角图像被复用和编码时能够在解码时识别多视角图像对的图像处理设备和图像处理方法。

背景技术

近年来，符合MPEG(运动图像专家组)方法等的设备正在广播台处的信息传递和家庭处的信息接收中变得普及，其中图像信息被视为数字信号并且利用图像信息专有的冗余性通过诸如离散余弦变换之类的正交变换和运动补偿被压缩，以高效地发送并累积信息。

即，编码器和解码器正变得普及，它们被用在通过诸如卫星广播、线缆TV和因特网之类的网络介质接收通过应用正交变换(例如离散余弦变换或Karhunen-Loeve变换)和运动补偿(例如MPEG和H.26x)的编码方法被压缩的图像信息(比特流)时，或者被用在处理诸如光盘/磁盘和闪存之类的存储介质上的图像信息时。

例如，MPEG2(ISO/IEC 13818-2)被定义为一种通用图像编码方法，其是一种覆盖隔行扫描图像(交织方法的图像)和逐行扫描图像(累进方法的图像)以及标准清晰度图像和高清晰度图像两者的标准，并且在当前被广泛用于专业用途和消费类用途的广阔应用。使用MPEG2压缩方法实现了高压缩速率和良好的图像质量，它是通过将4到8Mbps的代码量(比特率)分配给在水平×垂直方向上具有例如720×480像素的标准清晰度的隔行扫描图像、并将18到22Mbps的比特率分配给具有1920×1088像素的高清晰度的隔行扫描图像而实现的。

MPEG2定位于主要适合于广播的高图像质量，但是它不会对低于MPEG1(即，具有更高压缩速率的编码方法)的代码量(比特率)作出响应。根据便携式终端的发展，预期从现在开始对于这种编码方法的需要将日益增加，并且MPEG4编码方法的标准化被执行以响应于这种需要。关于图像编码方法，在1998年12月该标准被批准作为国际标准ISO/IEC 14496-2。

此外，AVC(MPEG-4第10部分，ISO/IEC 14496-10，ITU-T H.264)编码方法的标准化也在执行。该标准化是由一个被称为JVT(联合视频组)的组织推动的，其用于以彼此协作的方式实现ITU-T和ISO/IEC之间的图像编码方法的标准化。

AVC是以与MPEG2和MPEG4相同的方式将运动补偿与离散余弦变换相组合的混合编码方法。在AVC中，已知与诸如MPEG2和MPEG4之类的相关技术的编码方法相比，由于编码/解码需要大量的计算量，但是可以实现较高的编码效率。

随着近年来可以三维观看的立体图像的成像技术和显示技术的发展，不仅两维图像的内容而且立体图像的内容都被看作是作为上述编码目标的图像内容。形成立体图像的多视角图像的编码/解码方法例如在JP-A-2008-182669(专利文献1)中有所描述。

立体图像中具有最小数目的视点的图像是3D(3维)图像(立体图像)，其中视点的数目是2。3D图像的图像数据包括作为由左眼观察的图像的左眼图像(在下面的描述中也称为L(左)图像)的图像数据和作为由右眼观察的图像的右眼图像(在下面的描述中也称为R(右)图像)的图像数据。为了更容易进行说明，下面将利用具有两个视点的3D图像(其具有最小数目的视点)作为形成立体图像的多视角图像的示例。

发明内容

当3D图像的编码数据是通过在时间方向上复用形成3D图像的L图像和R图像(在下面的描述中称为LR对)并通过AVC编码方法进行编码而获得的比特流时，不同的DPB(解码图片缓冲器)输出时间信息(dpb_output_delay)被添加到形成LR对的L图像和R图像的编码数据。DPB输出时间信息是解码结果被从DPB输出时的时间信息。

因此，难以识别出LR对的编码数据由哪一图像的编码数据组成并且比特流中的哪一图像的编码数据被解码器解码。因此难以显示立体图像。

考虑到上述内容，希望当形成立体图像的多视角图像被复用和编码时能够在解码时识别多视角图像的对。

根据本发明的一个实施例，提供了一种图像处理设备，包括编码装置和发送装置，编码装置用于对形成立体图像的多视角图像的图像数据进行编码以生成编码流，发送装置用于将指示图像的解码结果的输出时间的输出时间信息仅连接到编码流中多视角图像中的任意一个的编码数据。

根据本发明一个实施例的图像编码方法对应于本发明一个实施例的图像处理设备。