[发明专利]图象解码方法,图象解码装置和图象解码程序记录媒体

说明书

本发明涉及图象解码方法，图象解码装置和图象解码程序记录媒体，特别是涉及在分别对由多个图象(物体)组成的数据流进行解码，合成并显示出解码后的图象的图象解码系统中，改良用于对各个图象的数据流进行解码的图象解码方法，图象解码装置和图象解码程序记录媒体的企图。

近年来，我们迎来了统一地处理声音，图象，其它的像素值的多媒体时代，已经能够将已有的信息媒体，即新闻，杂志，电视，无线电，电话等的信息传达给人的装置作为多媒体的对象来处理。一般地说，所谓多媒体，就是不仅与文字，同时还与图形，声音，特别是图象等关连地显示的媒体，但是为了将上述的已有的信息媒体作为多媒体的对象，将这些信息以数字的形式表示出来成为必要条件。

此外，当我们将上述的各个信息媒体持有的信息量作为数字信息量加以估计时，与文字时的每1个字的信息量为1～2个字节相对，声音时的每1秒需要64kbit(千比特)(电话质量)以上的信息量，进一步对于活动图象每1秒需要100Mbit(兆比特)(现行的电视接收质量)以上的信息量，将上述信息媒体的庞大的信息原封不动地用数字形式来处理是不现实的。例如，电视电话通过持有64kbps(千比特/秒)～1.5Mbps(兆比特/秒)的传输速度的综合业务数字网(ISDN：Integrated Service Digital Network)已经实用化了，但是不可能将电视·摄像机的图象原封不动地用ISDN来传送。

因此，信息压缩技术成为必要的技术，例如，在电视电话的情形中，正在使用由ITU-T(国际电信联盟，电信标准化部门)实施了国际标准化的H.261和H.263规格的活动图象压缩技术。又，藉助MPEG1规格的信息压缩技术，也可以在通常的用于音乐的CD(光盘)上同时收录声音信息和图象信息。

这里，所谓的MPEG(Moving Picture Experts Group，活动图像专家组)是活动图像的像素值压缩的国际规格，MPEG1是将活动图像像素值压缩到为1.5Mbps，即将电视信号的信息压缩到100分之1的规格。又，因为将作为MPEG1规格的对象的传输速度主要限制在1.5Mbps，所以用为了满足图象有更高质量的要求而实施了规格化的MPEG2，能够缓和这种限制，可以将活动图像像素值压缩到2～15Mbps。

进一步在现在的状态中，通过进行MPEG1，MPEG2和标准化的作业组(ISO/IEC JTC1/SC29/WG11)能够以物体为单位进行编码·操作，大致正在完成实现对多媒体时代必要的新功能的MPEG4的规格化。在MPEG4中，当初，以低比特速率的编码方法的标准化为目标，但是现在正在向也包含交织图象和高比特速率的编码的更通用的编码扩展。MPEG4的一个特征是同时对多个图象系列进行编码和传输的结构。这是为了能够由多个图象构成一个图象的情景，通过将前景和背景制成不同的图象系列，可以个别地变更帧频率和图象质量·比特速率，通过使多个图象系列如多个画面那样地在水平或垂直方向上并排起来，用户能够只提取所要的图象系列进行放大显示。对于背景来说，与MPEG2相同只对像素值进行编码是一般的做法，但是对于前景来说，不仅对表示物体(Object)的像素值的像素值信号进行编码，而且同时也对表示物体形状的形状信号进行编码。一般地，这种前景的编码作为以物体为单位的编码是知道的。显示的图象是这种编码后的各个图象的合成图象。

图8是说明以物体为单位的图象合成的样子的图。图8(a)是构成显示图象的气球的前景图象(以下，简单地称为前景)fv1的像素值，图8(b)是与图8(a)的前景fv1对应的形状信号fm1的形状值，图8(c)是构成显示图象的人物的前景fv2的像素值，图8(d)是与图8(c)的前景fv2对应的形状信号fm2形状值，图8(e)是背景图象(以下，简单地称为背景)rv的像素值，图8(f)是将图8(a)和图8(c)的前景fv1，fv2合成在图8(e)的背景rv上的显示图象。

此外，在图8(b)和图8(d)的形状信号的画面上，在画面内涂黑了的部分表示存在对应的像素值的区域，即表示物体内部，白色的部分表示不存在对应的像素值的区域，即表示物体外部。此外，可以用存在/不存在像素值的意思来表示像素值有意义/没有意义。