[发明专利]用于流帧的时间稳定的方法和设备

说明书

技术领域

根据示例实施例提供了用于处理流帧（streaming frame）并且更具体地用于提供流帧的时间稳定（temporal stabilization）方法和设备。

背景技术

为了例如通过捕获流视频帧来适当地记录或者另外处理流帧，实现了多个控制算法。例如，针对流帧的控制算法包括自动曝光控制（AEC）算法、自动白平衡（AWB）算法、如美国专利No.7,835,588所描述的对比优化算法等等。作为示例，AEC算法接收关于曝光的信息以及与当前帧相关的其它图像统计数据，确定当前帧所表示的图像是曝光不足、曝光过度还是适度曝光，并且在其中当前帧所表示的图像被确定为曝光不足或者曝光过度的情况下，针对下一帧建议不同的曝光。就此而言，图1描绘了多个帧的照度级（illumination level）以及进而针对下一个帧由AEC算法建议的曝光。因为AEC算法所执行的分析在已经被曝光的帧上被执行，所以针对下一个帧，光照度可能有所改变。由于常常希望帧流体验没有延迟，所以可能存在如图1中的“u”表示的偶尔的曝光不足或者如图1中的“o”表示的偶尔的曝光过度。此外，例如可能是由对当前帧的照度级的分析造成的曝光水平的频繁变化可能响应于图像亮度的至少一些相对微小的变化产生随时间推移的曝光水平的重复变化，使得所得到的视觉效果对于观看者而言可能有些不安。

已经开发了一种技术，该技术保存已针对多个先前的帧确定的未经滤波的控制值（即一个或多个控制算法的产物），然后确定并利用控制值的加权平均值。然而，这种技术的收敛速度不能简单且准确地调谐。此外，这种技术所提供的滤波的强度可能只在其中所保存的样本的数目相对较高的情况下被提高，这也可能是不利的。

发明内容

提供了根据本发明的示例实施例的方法、设备和计算机程序产品以提供对与流帧的处理相关联的一个或多个控制算法的改进的时间稳定。就此而言，示例实施例的方法、设备和计算机程序产品以一种平滑而较好快速的方式对曝光的变化做出响应，并且在一个实施例中可以允许收敛速度是可调谐的。此外，示例实施例的方法、设备和计算机程序产品可以被配置以使得不对输入数据偶尔的短暂异常（例如闪光灯）做出响应。因此，示例实施例的方法、设备和计算机程序产品可以在流帧只有微小变化的情况下提供对流视频的相对稳定的控制。在一个实施例中，所述方法、设备和计算机程序产品还可以顺畅地对流帧的是递减的或是递增的趋势进行跟随。通过提供针对流帧的时间稳定，用户体验可以通过提供所希望的控制但又以一种令人满意且在一些情况下可由用户调谐的方式而得以改善。

在一个实施例中，提供了一种方法，该方法包括利用处理器确定其间经滤波的值已经大于当前帧的当前值的紧接着在前的连续帧的数目或者其间经滤波的值已经小于当前帧的当前值的紧接着在前的连续帧的数目。该实施例的方法还可以包括基于紧接着在前的连续帧的数目确定权重。该权重被配置为按照与紧接着在前的连续帧的数目的直接关系而变化。该实施例的方法还基于该权重和先前经滤波的值和当前帧的当前值之间的差别的组合确定当前帧的经滤波的值。

在一个实施例中，该方法通过如下方式确定紧接着在前的连续帧的数目：维持其间经滤波的值已经大于当前帧的当前值的紧接着在前的连续帧的数目的第一计数器或者维持其间经滤波的值已经小于当前帧的当前值的紧接着在前的连续帧的数目的第二计数器。该实施例的方法还可以包括在其中经滤波的值至少超过当前帧的当前值的情况下重置第一计数器和第二计数器中的至少一个。另一实施例的方法还可以包括在其中经滤波的值至少超过当前帧的当前值的情况下减小第一计数器和第二计数器中的至少一个。在该实施例中，该方法还可以包括确定紧接着在前的连续帧是递增的或者确定紧接着在前的连续帧是递减的。在该实施例中，该方法可以通过在其中紧接着在前的连续帧被确定是递增的或是递减的的情况下减小但是不重置第一计数器和第二计数器中的至少一个来减小第一计数器和第二计数器中的至少一个。