[发明专利]基于分组的点云码流封装方法和系统

说明书

本发明提供了一种基于分组的点云码流封装方法和系统，对视频流按照不同属性进行分组，得到至少一个视频流track分组，所述一个视频流track分组中包括描述同一个点云内容的视频流，同一个视频流track分组中的点云内容能够互相替换以完成解码。本发明使得一个封装完成后的点云码流能够进行不同的解码组合，应对不同解码端的需求；在解码端的解码条件差的情况下，基于同样的点云内容选择较低质量的视频码流track进行解码，保障解码时视频的流畅呈现；以及在解码端实现个性化的解码呈现，例如在几何结构不变的情况下，更换点云的纹理信息。

技术领域

本发明涉及计算机技术领域，具体地，涉及一种基于分组的点云码流封装方法和系统。

背景技术

近几十年来，三维扫描技术和系统日趋成熟，3D扫描仪仪器制造成本降低，精度越来越高，其应用也越来越广泛，可快速精准的获取实际物体表面的三维坐标信息并存储，使点云数据可广泛应用于科研和工业中的图像处理相关领域中。

点云数据是物体三维扫描后其三维坐标的数据信息，还可能记录了RGB、深度等信息。随着三维扫描系统精度和速度的提升，扫描后点云数据量将达到几百万甚至更大的数量级，目前，海量点云数据为计算机存储、处理和传输增加沉重的负担。

点云的压缩算法已经有了较为系统的研究，动态点云的典型压缩方案是通过映射将3D点云数据转换为2D图片进行处理。这种方案使得点云可通过视频处理手段进行压缩和传输，但是转化后码流分为几何信息视频流、纹理信息视频流、占位图视频流、辅助信息流等。其中几何信息记录了点云的空间位置，最为重要，同时需要借助占位图和辅助信息才能实现解码，而纹理信息则是在几何信息解码完成后才能解码且同样需要借助占位图。三种视频流通常基于同一精度和编解码器统一封装起来，仅有一种呈现效果，这样的封装方式没有考虑到解码端设备的多样性、网络条件的复杂性和消费者使用时的个性化需求。如何针对动态点云压缩后的码流信息进行封装结构设计，使之适应于解码端的各类需求，是亟待解决的关键问题。

与本申请相关的现有技术是专利文献CN107454428，公开了一种视频数据的打包、编解码方法，包括以下步骤：实时接收视频数据信息，每隔一段固定的时间给数据信息插入一个第一标签，每两个第一标签之间的视频数据构成一个数据段；提取每一视频帧的时间戳；在部分特定的视频帧前面插入一个第二标签；对带有第二标签的视频帧进行H.264压缩；解码时，将背景图像中带有第二标签的视频帧和运动图像的每一个视频帧解码组合成数据段，然后对应第一标签按顺序组合这些数据段构成完整视频输出。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种基于分组的点云码流封装方法和系统。

根据本发明提供的一种基于分组的点云码流封装方法，对视频流按照不同属性进行分组，得到至少一个视频流track分组，所述一个视频流track分组中包括描述同一个点云内容的视频流，同一个视频流track分组中的点云内容能够互相替换以完成解码。

优选地，所述不同属性包括但不限于视频码率、视频分辨率、视频QP值、编解码器类型、点云纹理中的任一种或任多种。

优选地，所述视频流的视频种类包括几何信息视频流、纹理信息视频流、占位图视频流中的任一类或任多类。

优选地，所述几何信息视频流能够描述点云内容的几何信息；所述纹理信息视频流能够描述点云内容的纹理信息；所述占位图视频流能够描述点云内容的占位图信息。

优选地，对所述视频流track分组进行编号，所述编号是能够作为一个视频流track分组的唯一有效标识码。

优选地，所述分组能够将表达同一点云内容、不同属性的视频流track归为一个视频流track分组。

优选地，所述分组能够将多个表达同一点云内容、相同视频种类的视频流track归为一个视频流track分组。