[发明专利]用于降低解码器侧运动修正的译码等待时间的方法和装置

说明书

描述了用于降低解码器侧运动向量修正(DMVR)带来的译码等待时间的视频译码系统和方法的实施方式。在一个示例中，针对使用双向预测的采样的第一块(例如第一译码单元)的译码识别两个未修正的运动向量。未修正的运动向量的一者或两者用于预测采样的第二块(例如第二译码单元)的运动信息。使用DMVR修正两个未修正的运动向量，以及修正的运动向量用于生成采样的第一块的预测信号。这样的实施方式允许采样的第二块基本与第一块并行被译码，而不用等待第一块上的DMVR完成。在另外的实施方式中，针对运动向量修正描述基于光流的技术。

相关申请的交叉引用

本申请是名称为“用于降低解码器侧运动修正的译码等待时间的方法和装置”的美国临时专利申请序号62/690,507(2018年6月27日申请)的正式申请并根据35 U.S.C.§119(e)要求该申请的权益，其全部内容通过引用的方式合并于此。

背景技术

视频译码系统广泛用于压缩数字视频信号以降低这些信号的存储需求和/或传输带宽。在多种类型的视频译码系统中，例如基于块的、基于小波的、以及基于对象的系统，目前基于块的混合视频译码系统是最为广泛使用和部署的。基于块的视频译码系统的示例包括国际视频译码标准，例如MPEG1/2/4部分2、H.264/MPEG-4部分10AVC，VC-1、以及称为高效视频译码(HEVC)的最近的视频译码标准，该标准由ITU-T/SG16/Q.6/VCEG和ISO/IEC/MPEG的JCT-VC(视频译码联合工作组)开发。

第一版本的HEVC标准在2013年10月完成且与前代视频译码标准H.264/MPEG AVC相比提供大约50％比特率节省或等同感知的品质。虽然HEVC标准比其前任提供明显的译码改善，但是有证据表明，使用另外的译码工具能够比HEVC实现更优越的译码效率。基于此，VCEG和MPEG为未来视频译码标准化开始新译码技术的开发工作。由ITU-T VECG和ISO/IECMPEG于2015年10月成立的联合视频开发组(JVET)开始对先进技术的重要研究，其能够实现译码效率的本质增强。JVET通过在HEVC测试模型(HM)的基础上整合一些另外的译码工具，维护了称为联合开发模型(JEM)的参考软件。

在2017年10月，ITU-T和ISO/IEC发布了对HEVC之外能力的视频压缩的联合提案征集(CfP)。在2018年4月，接收到23份回应并在第十次JVET会议上评估，证明压缩效率增益超过HEVC大约40％。基于这种评估结果，JVET启动了新的计划来开发称为多功能视频译码(VCC)的新一代视频译码标准。同月，为证明VVC标准参考实施建立了称为VVC测试模型(VTM)的参考软件代码库。针对初始的VTM-1.0，按照现有的HEVC设计，大多数译码模块包括帧内预测、帧间预测、变换/逆变换和量化/解量化以及环内滤波器，除非在VTM中使用基于多类型树的块分区结构。同时，为了促进新译码工具的评估，也生成了称为基准集(BMS)的另一参考软件库。在BMS代码库中，在VTM的基础上还包括了提供更高译码效率和适度实施复杂性的从JEM继承过来的一系列译码工具，并在VVC标准化进程的过程中评估相似译码技术时被用作基准。整合在BMS-1.0中的JEM译码工具包括65个角度帧内预测方向、修改的系数译码、高级多重变换(AMT)+4x4不可分离二次变换(NSST)、仿射运动模型、广义自适应环路滤波器(GALF)、高级时间运动向量预测(ATMVP)、自适应运动向量预测、解码器侧运动向量修正(DMVR)以及LM色度模式。

发明内容

一些实施方式包括在视频编码(encoding)和解码(decoding)(统称为“译码”)中使用的方法。在基于块视频译码方法的一些实施方式中，包括：在第一块，修正(refine)第一未修正的运动向量和第二未修正的运动向量以生成第一修正的运动向量和第二修正的运动向量；使用第一未修正的运动向量和第二未修正的运动向量中的一者或两者，预测第二块的运动信息，第二块是第一块的空间相邻者；以及使用第一修正的运动向量和第二修正的运动向量通过双向预测来预测第一块。