[发明专利]多角度自由视角视频数据处理方法及装置、介质、设备

权利要求书

1.一种多角度自由视角视频数据处理方法，其特征在于，包括：

对获取到的视频数据进行解析，得到不同帧时刻的数据组合，所述数据组合中包括同步的多个图像的像素数据以及深度数据，所述同步的多个图像对待观看区域的视角不同；

对于每个帧时刻，基于所述数据组合，进行虚拟视点的图像重建，所述虚拟视点选自多角度自由视角范围，所述多角度自由视角范围为支持对待观看区域进行视点的切换观看的范围，所述重建后的图像，用于视频播放。

2.根据权利要求1所述的多角度自由视角视频数据处理方法，其特征在于，所述同步的多个图像中的每个图像，所述深度数据为所述图像的像素一一对应的深度值集合。

3.根据权利要求1所述的多角度自由视角视频数据处理方法，其特征在于，所述同步的多个图像中的每个图像，所述深度数据为对深度图进行降采样后得到的数据，所述深度图是与所述图像的像素一一对应的深度值集合按照所述图像的像素点排布的图像。

4.根据权利要求3所述的多角度自由视角视频数据处理方法，其特征在于，基于所述数据组合，进行虚拟视点的图像重建包括：

对所述深度数据进行升采样，得到与所述图像的像素一一对应的深度值集合；

根据同步的多个图像的像素数据以及所述深度值集合，进行虚拟视点的图像重建。

5.根据权利要求1所述的多角度自由视角视频数据处理方法，其特征在于，所述基于所述数据组合，进行虚拟视点的图像重建包括：

确定所述同步的多个图像中每个图像的参数数据，所述参数数据包括图像的拍摄位置和拍摄角度数据；

确定所述虚拟视点的参数数据，所述虚拟视点的参数数据包括虚拟观看位置和虚拟观看角度；

在所述同步的多个图像中确定多个目标图像；

对于每个目标图像，根据所述虚拟视点的参数数据以及所述图像的参数数据之间的关系，映射所述深度数据至所述虚拟视点；

根据映射至所述虚拟视点的深度数据，以及所述目标图像的像素数据，生成重建后的图像。

6.根据权利要求5所述的多角度自由视角视频数据处理方法，其特征在于，在所述同步的多个图像中确定多个目标图像包括：根据所述虚拟视点的参数数据以及所述图像的参数数据之间的关系，在所述多个图像中选取目标图像。

7.根据权利要求6所述的多角度自由视角视频数据处理方法，其特征在于，以同步的多个图像中的全部图像，作为所述目标图像。

8.根据权利要求6所述的多角度自由视角视频数据处理方法，其特征在于，所述图像的参数还包括内部参数数据，所述内部参数数据包括图像的拍摄设备的属性数据。

9.根据权利要求1所述的多角度自由视角视频数据处理方法，其特征在于，进行虚拟视点的图像重建前，还包括：接收所述虚拟视点的参数数据。

10.根据权利要求9所述的多角度自由视角视频数据处理方法，其特征在于，进行虚拟视点的图像重建后，还包括：发送所述重建后的图像至图像显示端。

11.一种多角度自由视角视频数据处理方法，其特征在于，包括：

采用如权利要求1至10任一项所述的多角度自由视角视频数据处理方法进行虚拟视点的图像重建；

基于所述不同帧时刻的重建后的图像，进行视频播放。

12.根据权利要求11所述的多角度自由视角视频数据处理方法，其特征在于，进行虚拟视点的图像重建前，还包括：接收用户的指示，根据所述用户指示确定所述虚拟视点。