[发明专利]用于基于上下文的视频质量评估的方法和装置

说明书

技术领域

本发明涉及视频质量测量，并且更具体地，涉及用于确定客观视频质量度量的方法和装置。

背景技术

已经开发出不同的方法来估计视频序列中的各个帧的质量级别。给出视频序列中的各个帧的所估计的质量级别，已经在时间汇合(pool)策略的框架下研究了获取与视频序列的所感知的质量良好匹配的客观的总的视频质量度量的方法。

发明内容

所述原理提供一种用于估计视频序列的视觉质量的方法，如下所述，其包含：从包含视频序列的当前帧的多个邻域确定当前帧的邻域；响应于所确定的邻域中的帧的空间失真来确定当前帧的初始的时间失真；确定所确定的邻域中的帧的空间失真的分布；响应于初始的时间失真和分布来确定当前帧的时间失真；以及响应于当前帧的时间失真来确定视频序列的视觉质量。所述原理还提供用于执行这些步骤的装置。

所述原理还提供一种用于估计视频序列的视觉质量的方法，如下所述，其包含：确定在包含视频序列的当前帧的多个邻域之中对当前帧的时间失真具有最大影响的当前帧的邻域；响应于所确定的邻域中的帧的空间失真来确定当前帧的初始的时间失真；确定当前帧与所确定的邻域中的具有大失真的最靠近的帧之间的距离；响应于初始的时间失真和距离来确定当前帧的时间失真；以及响应于当前帧的时间失真来确定视频序列的视觉质量。所述原理还提供用于执行这些步骤的装置。

所述原理还提供一种计算机可读存储介质，在其上存储有用于根据上述方法来估计视频序列的视觉质量的指令。

附图说明

图1A是图示示例性视频序列中的各个帧的空间伪像级别的图示示例，图1B是图示示例性视频序列中的各个帧的所感知的时间质量的图示示例。

图2A、2B和2C是根据所述原理的实施例的图示在视频质量建模中所使用的滑动窗口的图示示例。

图3A是图示另外的示例性视频序列中的各个帧的空间伪像级别的图示示例，并且图3B和3C分别是根据所述原理的实施例的图示帧的邻域中的主导失真(dominant distortion)和所估计出的时间失真的图示示例。

图4A是图示另外的示例性视频序列中的各个帧的空间伪像级别的图示示例，并且图4B和4C分别是根据所述原理的实施例的图示帧的邻域中的最高的大失真密度和所估计出的时间失真的图示示例。

图5A是图示另外的示例性视频序列中的各个帧的空间伪像级别的图示示例，并且图5B和5C分别是根据所述原理的实施例的图示帧的邻域中的最高的大失真密度和所估计出的时间失真的图示示例。

图6是图示根据所述原理的实施例的对帧n的时间失真建模的示例性方法的流程图。

图7是图示根据所述原理的实施例的示例性视频质量监视器的框图。

图8是图示可以与一个或多个实现方式一起使用的示例性视频处理系统的框图。

具体实施方式

在本申请中，使用“空间伪像”来表示在对视频序列中的图片独立于视频序列中的其他图片来观看时在该图片中所感知的伪像，并且使用“时间伪像”来表示在连续地显示视频序列中的图片时在视频序列的一个图片中所感知的伪像。类似地，使用“空间失真”或“空间质量”来表示在独立于视频序列中的其他图片来观看图片时在该图片中所感知的失真或质量，并且使用“时间失真”或“时间质量”来表示在连续地显示视频序列中的图片时在视频序列的一个图片中所感知的失真或质量。

在评估空间失真时，在一时间段内独立于视频序列中的其他图片地观看一个图片，该时间段对于观看者识别图像内容和失真是足够长的。这与评估图片被连续地显示的情况下的时间失真不同。

在本申请中，术语“帧”与术语“图片”可互换地使用。术语“失真”和“伪像”两者都指帧中的质量下降，并且往往可互换地使用。

帧n的空间失真记为ds(n)，其可以通过多种图像质量评估方法来获得，例如但不限于全参考(full-reference)或无参考(no-reference)方法以及像素域或比特流级别的方法。在一个实施例中，如在N.Liao、Z.Chen和K.Xie的标题为“Video quality assessment at a bitstream level”的共同拥有的PCT申请(PCT/CN2012/078766，律师案号PA120027)(通过引用将其教导具体地并入本文)中公开的那样，可以将空间失真估计为由初始和/或传播的可见伪像所引起的总的可见伪像级别。