[发明专利]对视频序列解码或编码中的残差编解码进行控制的方法和装置

说明书

本申请提供一种对视频序列解码或编码中的残差编解码进行控制的方法和装置。该方法包括：基于块高度和块宽度中的两者或两者之一是否满足预定条件，确定是否使用恒等变换(Identity transform，IDT)替代多变换选择(Multiple Transform Selection，MTS)的变换类型；及基于所述块高度和所述块宽度中的两者或两者之一满足所述预定条件，使用所述IDT替换MTS的所述变换类型，并且保持所述MTS的语法不变；其中，所述IDT是使用NxN变换核的线性变换过程，其中，所述NxN变换核中，沿对角位置的每个系数是非零的，并且N是整数。

相关文件

本申请要求2018年9月14日递交的美国临时申请62/731,773的优先权，以及2019年4月24日递交的美国申请16/393,289的优先权，其全部内容通过引用并入本文。

技术领域

各实施例的方法和装置涉及视频编解码，特别涉及对视频序列解码或编码中的残差编解码进行控制的方法和装置。

背景技术

在高效视频编码(High Efficiency Video Coding，HEVC)中，通过使用表示为编码树的四叉树结构将编码树单元(coding tree unit，CTU)分成编码单元(coding unit，CU)，以适应各种局部特性。在CU级做出是否使用帧间(时域)或帧内(空间)预测来对图像区域进行编码的决定。每个CU可以根据预测单元(prediction unit，PU)分割类型进一步分割成一个、两个或四个PU。在一个PU内，应用相同的预测过程，并以每个PU为基础将相关信息发送到解码器。在通过应用基于PU分割类型的预测过程获得残差块之后，可以根据与CU的编码树类似的另一个四叉树结构将CU分割为变换单元(transform unit，TU)。HEVC结构的一个关键特征是它具有多个分割概念，包括CU、PU和TU。在HEVC中，CU或TU可仅为正方形，而PU可为用于帧间预测块的正方形或矩形。在HEVC的后期，一些投稿建议允许矩形PU用于帧内预测和变换。在图像边界处，HEVC进行隐式四叉树分割，以便对一个块持续进行四叉树分割，直到尺寸适合图像边界为止。

在多功能视频编码(Versatile Video Coding，VVC)中，四叉树加二叉树(quadtree plus binary tree，QTBT)结构删除了多个分割类型的概念，即删除了CU、PU和TU概念的区分，并为CU分割形状提供了更大的灵活性。在QTBT块结构中，CU的形状可以为正方形或矩形。在图1A中，首先利用四叉树结构对CTU进行分割。对四叉树叶节点，利用二叉树结构进行进一步分割。在二叉树分割中，有两种分割类型：对称水平分割和对称垂直分割。二叉树叶子节点称为CU，用于预测和变换处理而无需任何进一步的分割。这意味着在QTBT编码块结构中，CU、PU和TU具有相同的块大小。在VVC中，CU有时由不同颜色成分的编码块(coding block，CB)组成，例如，对于4：2：0色度格式的P切片和B切片，一个CU包含一个亮度CB和两个色度CB，并且一个CU有时包含单个成分的CB，例如，对于I切片，一个CU仅包含一个亮度CB或仅包含两个色度CB。

为QTBT分割方案定义了以下参数。

–CTU大小：四叉树的根节点大小，与HEVC中的概念相同

–MinQTSize：四叉树叶节点被允许的最小尺寸

–MaxBTSize：二叉树根节点被允许的最大尺寸

–MaxBTDepth：二叉树被允许的最大深度

–MinBTSize：二叉树叶节点被允许的最小尺寸