[发明专利]在数据流中编码及解码来自数据流的三维场景的方法和装置

权利要求书

1.一种从数据流中解码三维场景的方法，该方法包括：

-从所述数据流中获得：

·打包在色彩图像中的色彩画面；

·打包在深度图像中的深度画面；和

·元数据，对于所述色彩图像的每个色彩画面，所述元数据包括：

-去投影数据；

-色彩数据，包括色彩画面在色彩图像中的位置的描述；和

-属于类型组的类型的几何数据，包括：第一种几何类型，包括深度画面在深度图像中的位置的描述；和第二种几何类型，包括被表示为三维网格的三维对象的标识符；

-对于所述色彩图像的色彩画面：

·在几何数据是第一种几何类型的情况下，根据由几何数据描述的深度画面的像素确定出的深度值，使用去投影数据去投影由色彩数据描述的色彩画面的像素的颜色；

·在几何数据是第二种几何类型的情况下，根据三维网格的顶点和面确定出的深度值，使用去投影数据去投影由色彩数据描述的色彩画面的像素的颜色。

2.根据权利要求1所述的方法，其中，从流中获得第二种类型的几何数据的几何数据中识别的三维网格的顶点和面。

3.根据权利要求1所述的方法，色彩数据还包括色彩图像中的色彩画面的大小和/或形状的描述。

4.根据权利要求1所述的方法，其中，所述流包括色彩图像、深度图像和相关联的元数据的序列，深度图像和有关元数据与色彩图像相关联；色彩图像由时间信息进行结构化。

5.一种用于在数据流中编码三维场景的方法，该方法包括：

-获得一组补片，所述一组补片包括：

·去投影数据；

·色彩画面；和

·包括深度画面的第一种几何类型的几何数据，和包括被表示为三维网格的三维对象的标识符的第二种几何类型的几何数据；

-通过打包所述补片的色彩画面和色彩数据生成色彩图像，色彩数据包括打包在色彩图像中的色彩画面的位置的描述；

-通过打包具有第一种几何类型的几何数据的补片的深度画面并通过深度图像中打包的深度画面的位置的描述来替换对应补片的几何数据中的深度画面来生成深度图像；

-在流中编码：

·生成的色彩图像；

·生成的深度图像；

·元数据，其包括每个补片的几何数据、色彩数据和去投影数据。

6.根据权利要求5所述的方法，其中，在流的单独的语法元素中进一步编码第二种类型的几何数据的几何数据中识别的三维网格的顶点和面。

7.根据权利要求5所述的方法，其中，色彩数据还包括色彩图像中的色彩画面的大小和/或形状的描述。

8.根据权利要求5所述的方法，其中，所述流包括色彩图像、深度图像和相关联的元数据的序列，深度图像和有关元数据与色彩图像相关联；色彩图像由时间信息进行结构化。

9.一种用于从数据流中解码三维场景的设备，该设备包括与处理器相关联的存储器，该处理器被配置为：

-从所述数据流中获得：

·打包在色彩图像中的色彩画面；

·打包在深度图像中的深度画面；和

·元数据，对于所述色彩图像的每个色彩画面，所述元数据包括：

-去投影数据；

-色彩数据，包括色彩画面在色彩图像中的位置的描述；和

-属于类型组的类型的几何数据，包括：第一种几何类型，包括深度画面在深度图像中的位置的描述；和第二种几何类型，包括被表示为三维网格的三维对象的标识符；

-对于所述色彩图像的色彩画面：

·在几何数据是第一种几何类型的情况下，根据由几何数据描述的深度画面的像素确定出的深度值，使用去投影数据去投影由色彩数据描述的色彩画面的像素的颜色；

·在几何数据是第二种几何类型的情况下，根据三维网格的顶点和面确定出的深度值，使用去投影数据去投影由色彩数据描述的色彩画面的像素的颜色。