[发明专利]用于处理360°VR帧序列的方法及装置

权利要求书

1.一种处理360°VR帧序列的方法，其特征在于，所述方法包括：

接收与所述360°VR帧序列有关的输入数据，其中每一360°VR帧包括与多面体格式有关的一组面；

将每一所述一组面重排进由前子帧以及后子帧组成的矩形的整个VR帧，其中所述前子帧对应于覆盖前180°×180°视野的第一视场的第一内容以及所述后子帧对应于覆盖后180°×180°视野的第二视场的第二内容；以及

提供对应于包括所述矩形的整个VR帧的序列的重排的360°VR帧序列的输出数据。

2.如权利要求1所述的处理360°VR帧序列的方法，其特征在于，其中所述多面体格式对应于具有六个面的立方体格式、具有八个面的八面体格式或者具有二十个面的二十面体格式。

3.如权利要求1所述的处理360°VR帧序列的方法，其特征在于，其中每一所述一组面被重排进具有空白区域或不具有空白区域的所述矩形的整个VR帧中。

4.如权利要求3所述的处理360°VR帧序列的方法，其特征在于，其中通过将多面体的多个面的展开图像填充进目标矩形中，将在所述目标矩形之外的任何面或任何部分面移动到所述目标矩形中未使用的区域中，以及填充所述空白区域，来从所述多面体的多个面的所述展开图像中导出具有空白区域的每一所述矩形的整个VR帧。

5.如权利要求3所述的处理360°VR帧序列的方法，其特征在于，其中决定所述目标矩形中的目标紧凑矩形，以及移动具有空白区域的每一所述矩形的整个VR帧的所选择的面或部分面来填充所述空白区域来形成不具有空白区域的所述矩形的整个VR帧。

6.如权利要求1所述的处理360°VR帧序列的方法，其特征在于，其中所述前子帧以及所述后子帧对应于所述矩形的整个VR帧的左半部分以及右半部分，或者对应于所述矩形的整个VR帧的上半部分或下半部分。

7.如权利要求1所述的处理360°VR帧序列的方法，其特征在于，进一步包括通过使用对应于一个或多个先前已编码前子帧的第一参考数据处理每一所述矩形的整个VR帧中的当前前子帧以及使用对应于一个或多个先前已编码后子帧的第二参考数据处理每一所述矩形的整个VR帧中的当前后子帧来将所述重排的360°VR帧序列编码成压缩的比特流，并提供所述压缩的比特流。

8.如权利要求7所述的处理360°VR帧序列的方法，其特征在于，其中对所述重排的360°VR帧序列进行编码包括将每一所述矩形的整个VR帧分割成对应于每一所述矩形的整个VR帧中的所述前子帧以及所述后子帧的两个切片或两个方块。

9.如权利要求7所述的处理360°VR帧序列的方法，其特征在于，其中对所述重排的360°VR帧序列进行编码包括仅使用所述一个或多个先前已编码前子帧执行所述前子帧的整数运动搜索或仅使用所述一个或多个先前已编码后子帧执行所述后子帧的整数运动搜索。

10.如权利要求7所述的处理360°VR帧序列的方法，其特征在于，其中对所述重排的360°VR帧序列进行编码包括仅使用所述一个或多个先前已编码前子帧减去所述前子帧与所述后子帧之间的多个边界线来执行所述前子帧的分数像素运动搜索，或者仅使用所述一个或多个先前已编码后子帧减去所述前子帧与所述后子帧之间的所述多个边界线来执行所述后子帧的所述分数像素运动搜索。

11.如权利要求7所述的处理360°VR帧序列的方法，其特征在于，其中对所述重排的360°VR帧序列进行编码包括仅使用所述一个或多个先前已编码前子帧执行所述前子帧的运动搜索，其中用所述先前已编码前子帧的边界像素替换在所述先前已编码前子帧外的任何参考像素；或者仅使用所述一个或多个先前已编码后子帧执行所述后子帧的所述运动搜索，其中用所述先前已编码后子帧的边界像素替换所述先前已编码后子帧外的任何参考像素。