[发明专利]用于视频防抖的方法和装置

说明书

技术领域

本发明的实施例涉及视频处理，更具体地，涉及用于视频防抖的方法和装置。

背景技术

随着视频获取和处理技术的发展，越来越多的设备具有视频捕获的功能。例如，目前的大多数手持移动设备(例如，移动电话、个人数字助理PDA、平板式计算机，等等)都配备有能够捕获视频的相机。在用户捕获视频的过程中，特别是在移动中捕获视频时，相机的抖动将导致所捕获视频中出现抖动现象，从而导致视频质量的下降。为此，通常采用视频防抖(anti-shaking)处理来改善视频质量。一般而言，视频防抖处理的目标是生成经过补偿的视频，以使得在经过补偿的视频中，视频帧之间不期望的抖动被减轻或消除。

某些视频防抖方案是基于硬件的。例如，可以借助于重力传感器、加速度传感计、陀螺仪、机械减震器、角速度传感器或者专用光学防抖器件来增强视频的稳定性。由于需要附加的硬件，此类视频防抖方案将会导致设备尺寸和／或成本的增加。基于软件的视频防抖方案可以在不增加额外硬件开销的情况下，通过视频／图像处理技术对所捕获视频中的抖动进行补偿和消除。然而，已知的基于软件的视频防抖方案中，帧间运动估计通常采用的是块匹配或者特征点匹配方法，这是相当耗时和低效的。而且，已知的软件视频防抖方案往往无法处理复杂的场景，例如场景中存在较大的移动物体、阴影、遮挡，等等。特别地，已知的软件防抖方案很难区分出视频中随机的物体运动和有意识的相机运动，从而影响防抖处理的准确性。

基于上述讨论，本领域中需要一种能够更为快速、有效、低成本的用于视频防抖的技术方案。

发明内容

为了克服现有技术中的上述问题，本发明提出一种用于视频防抖的方法和装置。

在本发明的一个方面，提供一种用于在视频防抖中使用的方法。所述方法包括：将视频的当前帧的至少一部分划分为多个区域；针对所述多个区域中的每个区域，执行渐进式局部运动检测以确定用于所述区域的局部运动矢量；以及基于用于所述多个区域的所述局部运动矢量，确定用于所述当前帧的全局运动矢量。

在本发明的另一方面，提供一种用于在视频防抖中使用的装置。所述装置包括：帧划分单元，被配置为将视频的当前帧的至少一部分划分为多个区域；局部运动检测单元，被配置为针对所述多个区域中的每个区域，执行渐进式局部运动检测以确定用于所述区域的局部运动矢量；以及全局运动估计单元，被配置为基于用于所述多个区域的所述局部运动矢量，确定用于所述当前帧的全局运动矢量。此方面的其他实施例还包括包含该装置的用户设备。

通过下文描述将会理解，根据本发明的实施例，视频防抖处理无需任何附加的硬件。而且，通过渐进式地确定局部运动矢量以及基于局部运动矢量来确定全局运动矢量，可以快速、有效地确定帧间运动矢量。特别地，视频的防抖处理可以实时地完成。另外，本发明的实施例能够处理各种复杂的情况，例如所捕获的场景中具有遮挡、阴影、特征缺失、移动物体、重复的图案、有意识的相机平移，等等。此外，本发明的实施例具有良好的兼容性和移植性，可以容易地与各种平台和设备结合使用。

附图说明

通过参考附图阅读下文的详细描述，本发明实施例的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本发明的若干实施例，其中：

图1示出了根据本发明的示例性实施例的用于视频防抖的方法的流程图；

图2示出了根据本发明的示例性实施例的用于各个区域的局部运动矢量的示意图；

图3示出了根据本发明的示例性实施例的用于在视频防抖中使用的方法的流程图；

图4A和图4B示出了根据本发明的示例性实施例的水平和垂直投影曲线的示意图；

图5示出了根据本发明的示例性实施例的运动滤波器的示意图；

图6示出了根据本发明的示例性实施例的用于在视频防抖中使用的装置的框图；以及

图7示出了本发明的示例性实施例可实现于其中的用户设备的框图。

在各个附图中，相同或对应的标号表示相同或对应的部分。

具体实施方式