[发明专利]一种视频图像的编解码方法和装置

说明书

本发明实施例提供一种视频图像编解码方法及装置，其中，一种视频图像解码方法，包括：解析高分辨率图像码流，生成第一类子图像的重建图像和第一类子图像的辅助信息，辅助信息表征子图像的尺寸信息和在解码端待重建图像中的位置信息，子图像为解码端待重建图像中任一连续区域的像素集合，解码端待重建图像的子图像互不重叠；当根据第一类子图像的重建图像不能获得完整的解码端重建图像时，解析低分辨率图像码流，生成第二类子图像的重建图像，第二类子图像具有和所述第一类子图像相同的分辨率；根据辅助信息，拼接第一类子图像的重建图像和第二类子图像的重建图像，生成解码端重建图像。

技术领域

本发明实施例涉及视频图像压缩领域，尤其涉及一种视频图像的编解码方法和装置。

背景技术

随着虚拟现实眼镜(Oculus Rift)，虚拟现实头盔(Gear VR)等一系列虚拟现实(Visual Reality，VR)产品与应用的迅速流行，通过VR产品浏览视频内容或进行实时视频会话成为VR产品的重要应用之一。

VR终端设备的常见形式为头戴式观看设备，通常为一副眼镜，其中内置发光屏幕用于显示视频图像。设备中置有位置与方向感知系统，能够追踪用户头部的各种运动，并将相应位置与方向的视频图像内容呈现到屏幕上。VR终端设备还可以包括用户视线追踪系统等高级交互功能模块，并将用户感兴趣区域呈现到屏幕上。为支持各个方向的视频图像内容呈现，VR视频图像需要包含三维空间上下左右360度全向的视觉信息，可以想象为从一个地球仪的内部中心位置向外观看地球仪上的地图。因此，VR视频图像也可以称为全景视频图像。

视频图像可理解为在不同时刻所采集得到图像的图像序列，因物体运动在时空域具有连续性，该图像序列中的相邻图像的内容高度相似性。因此，对视频进行的各种处理也可分解为对其中的图像分别进行相应处理。

如果全景视频图像采用球面格式，将无法方便的表示、存储和索引，因此现有技术通常将球面全景图展开得到二维平面全景图，再对其进行压缩、处理、存储、传输等操作。将三维球面全景图展开得到二维平面全景图的操作称为映射。目前存在多种映射方法，对应的得到多种二维平面全景图格式。最常见的全景图格式称为经纬图，可以形象的表示为图1。经纬图中，邻近南北两极区域图像经过拉伸获得，存在严重的失真和数据冗余。

为克服经纬图中存在的强失真，如图2所示，可以将全景图像投影到一个金字塔形的五面体中，并保持用户所观看的当前视投影在金字塔的底部。这种投影方式保持金字塔底部的当前视的图像分辨率不变，对其余四个面所表示的用户侧面及后方视进行降分辨率处理，接着将该五面体展开并对上述金字塔的四个侧面进行形变处理使得金字塔的所有五个面拼接为一个正方形图像，如图3所示。为了能够响应用户切换视的需求，还可以将空间球面切分为若干个视点，为每一个视点生成金字塔格式图像，并同时存储这若干个视点的金字塔格式全景图，如图4所示。

可见，为了满足用户观看任意视点视频内容的需要，需要存储大量的视频数据，编码多个视点的视频数据，增加了编解码设备的数据处理复杂度和功耗，进而为进行全景视频的实时通信增加了困难。

发明内容

本发明的实施例提供一种视频图像的编解码方法和装置，用以提高编码效率。

为达到上述目的，本发明的实施例采用如下技术方案：

第一方面，本发明实施例提供了一种视频图像编码方法，包括：编码待编码图像的至少一个子图像，生成高分辨率图像码流，该子图像为该待编码图像中任一连续区域的像素集合，该待编码图像的子图像互不重叠；将该至少一个子图像的辅助信息编入该高分辨率图像码流，该辅助信息表征该子图像的尺寸信息和在该待编码图像中的位置信息。

该实施方式的有益效果在于选择性地编码部分图像，并把该编码部分图像的辅助信息编入码流，节省了需要编码和存储的数据，提供了编码效率，节省了功耗。