[发明专利]处理图像/视频数据的方法及装置

说明书

【技术领域】

本发明关于图像/视频数据的处理，尤其关于在与残余量信号相关的不同信道之间处理图像/视频数据的方法及装置。

【背景技术】

图像压缩与视频压缩已被广泛用于降低与各个图像及视频数据相关的所需存储空间或带宽。基本图像(underlying image)或视频数据通常包含多个信道(channel)。举例来说，在数码相机应用中，通常使用红(R)、绿(G)和蓝(B)色彩阵列的图像传感器(image sensor)来采集原始图像(raw image)。当RGB色彩为采集或显示应用提供方便的格式(format)来表示彩色图像或视频时，不得不平等地对待三个颜色信道来存储或传输，而这可能并不是有效的。在图像及视频编码领域，广泛使用了各种亮度/色度(luminance/chrominance)色彩格式，其中每一色彩格式对应于一个亮度分量及两个色度分量。举例来说，YUV或YCrCb色彩格式在各种图像及视频压缩标准中已被使用。由于人类视觉对色度信号较不敏感，因此能以较低的空间分辨率表示色度信号(即U/Cb及V/Cr)，在视觉品质上没有劣化或只有较小劣化。也有亮度/色度色彩格式的其他变形。举例来说，在No.7155055的美国专利中揭示的YCoCg色彩格式及在No.6044172的美国专利中揭示的可逆YUV色彩格式使用简化的色彩变换矩阵(color transform matrix)，这样一来在RGB及YCoCg/整数YUV格式之间只使用整数运算(integer operation)来转换信号。在贝尔模板(Bayer pattern)中的RGB与YCoCg色彩格式之间也有一种色彩格式转换，如公开号No.US2006/0083432的美国专利申请中所揭示。在典型的图像/视频压缩系统中，压缩程序分别应用于各个亮度及色度信道。

在基本色彩格式(primary color format)及亮度/色度格式之间的色彩转换涉及到基于像素的运算，其中该转换用一组线性方程式(即转换矩阵)来表示。当亮度/色度格式移除基本色彩格式中初始图像或视频的不同信道间的若干冗余量时，在亮度/色度格式中不同信道间仍然有大量的相关性。对于亮度/色度格式中的图像或视频，有需要利用不同信道间的冗余量。此外，当利用不同信道间的冗余量时，有需要降低对现有图像或视频压缩系统的影响。

图1为图像压缩系统如数码相机的范例。图像传感器110用来采集原始图像数据120。图像压缩器130接收原始图像数据120并应用图像压缩来产生压缩图像数据140。通常，图像压缩应用于亮度/色度色彩格式(如YUV)中的图像数据。因此，在图像压缩器130中执行色彩转换，将原始图像首先转换成亮度/色度格式，接着将图像压缩应用于各个信道。图2为用于传输或接口应用(例如MIPI(移动行业处理器接口)，DSI(显示器串行接口)及HDMI(高清晰多媒体接口)，Wi-Fi显示或蓝牙)的图像压缩的范例。方块图200A对应于发射器端，其中从发射器210接收原始图像数据220。在机顶盒与HDTV(高清晰度电视)组之间的HDMI接口范例中，发射器对应于机顶盒以及接收器对应于HDTV组。图像压缩器230将原始图像数据压缩成压缩图像数据240。接着该压缩图像数据在媒质例如物理电缆或无线链路上传输。方块图220B对应于接收器端，其中在媒质上接收压缩图像数据250。接着该压缩图像数据由图像解压缩器260解压缩以恢复原始图像数据270。接着将该恢复的原始图像数据提供至接收器280以显示出来。