[发明专利]一种用于减轻数字视频的互操作性情景中的损失的方法、系统节点和计算机可读介质

说明书

提出了减轻数字视频的互操作性情景中的损失的方法。例如，比特流修改工具(例如，运行在视频会议系统的网络节点上的比特流重写器)接收经编码视频的流入比特流(例如，从使用第一损失恢复策略的编码器)。比特流修改工具处理经编码视频的流入比特流以产生经编码视频的流出比特流。通过这样做，比特流修改工具改变流入比特流与流出比特流之间的至少一个语法元素以便减轻在有损递送情况下对流出比特流的解码期间的图片损失效应。比特流修改工具输出流出比特流。以该方法，比特流修改工具可以帮助避免空白屏幕、冻结屏幕或者在有损递送情况下的解码期间的其它故障(例如，利用使用不同损失恢复策略的解码器)。

背景技术

当视频经过互联网流送并且通过Web浏览器或媒体播放器回放时，视频以数字形式被递送。数字视频也在视频通过许多广播服务、卫星服务和有线电视服务递送时被使用。实时视频会议经常使用数字视频，并且数字视频在使用大多数智能电话、Web相机和其它视频捕捉设备进行的视频捕捉期间被使用。

数字视频可能消耗极其大量的比特。工程师使用压缩(也被称为源译码(sourcecoding)或源编码(source encoding))以减少数字视频的比特率。压缩通过将信息转换成更低的比特率形式来降低存储和发送视频信息的成本。解压缩(也被称为解码)从圧缩形式中重构原始信息的版本。“编解码”是编码器/解码器系统。

在近二十年，已采用各种视频编解码标准，包括ITU-T H.261、H.262 (MPEG-2或者ISO/IEC 13818-2)、H.263、H.264(MPEG-4 AVC或者 ISO/IEC 14496-10)和H.265(HEVC或者ISO/IEC 23008-2)标准、MPEG-1 (ISO/IEC 11172-2)和MPEG-4视觉(ISO/IEC 14496-2)标准和SMPTE 421M标准。视频编解码标准典型地定义了针对经编码视频比特流的语法的选择，详细说明当在编码和解码中使用特定特征时比特流中的参数。在许多情况中，视频编解码标准还提供关于解码器应该执行的、以在解码中达到一致结果的解码操作的细节。除编解码标准之外，各种专利的编解码格式(例如，VP8、VP9以及其它VPx格式)定义了针对经编码视频比特流的语法和相应的解码操作的其它选择。通常，编解码标准或格式允许由一个公司制造的编码器与由另一公司制造的解码器互操作。只要两个公司已遵循编解码标准或格式中的相关的指导准则，则在正常操作情况下由第一公司的编码器编码的内容能够成功地被第二公司的解码器解码。

然而，解码器的一些操作在编解码标准或格式之外。这样的操作可以取决于实施方式而变化，这意味着不同的解码器可以以不同的方法来实现操作。特别地，不同的解码器可以使用不同的策略以在解码期间从经编码数据的损失(例如，因为网络拥塞)中恢复。作为实施方式中的这些差异的结果，使用一种损失恢复策略的编码器当与使用另一损失恢复策略的解码器进行互操作时，可能遇到非预期的问题。例如，在视频会议期间，利用使用一个损失恢复策略的编码器编码的内容可能被递送至使用相同损失恢复策略的解码器和/或使用另一损失恢复策略的解码器。当经编码数据因为网络拥塞而丢失时，使用相同损失恢复策略的解码器可以快速地从经编码数据的损失中恢复，而使用其它损失恢复策略的解码器显示若干秒空白屏幕或者冻结屏幕，或者甚至无法恢复，要求耗时的对解码器的重启。

发明内容

概括地说，具体实施方式提出了减轻数字视频的互操作性情景中的损失的方法。例如，在视频会议系统的网络节点处的比特流重写器对其从接收到的比特流执行轻量级比特流重写过程，所述发射机节点运行使用损失恢复策略的编码器。比特流重写器修改比特流以使其当在接收机节点处被解码时对于经编码数据的损失(例如，由于网络拥塞)更加能复原，所述接收机节点运行使用另一损失恢复策略的解码器。当比特流被递送至使用与编码器相同的损失恢复策略的解码器时，比特流重写器可以跳过比特流重写过程。以该方法，比特流重写器可以帮助避免空白屏幕、冻结屏幕或者在使用其它损失恢复策略的解码器的有损递送情况下的解码期间的其它故障。