[发明专利]用于调整所俘获视频的定向的系统和方法

说明书

技术领域

本发明大体上涉及用于通过利用建构至视频记录装置中的加速计数据来调整场景中对象的所俘获视频的定向的系统和方法。

背景技术

通常，在便携式摄像机的预览中或在视频电话(VT)应用的本地视图中，对象的图像定向始终与场景中对象的真实定向相同，而不管所述装置的定向如何。

然而，当编码帧时，每一帧中对象的图像定向取决于俘获帧的时刻装置的定向，其未必与场景中对象的真实定向匹配。因此，如果在俘获对象时装置旋转角度θ，那么在所记录视频中，对象的视图也将旋转角度θ，而非在所俘获场景中呈现对象的真实定向。

发明内容

在一个实施例中，本发明提供一种用于编码视频俘获装置上俘获的视频的方法。所述方法包括在俘获场景的视频时读取来自视频俘获装置的定向数据。所述方法进一步包括基于定向数据产生旋转矩阵。所述方法进一步包括调整所俘获视频的定向以与场景的真实定向匹配。所述方法进一步包括编码所述经调整的所俘获视频。在另一实施例中，本发明提供一种用于编码视频俘获装置上的视频俘获的系统。所述系统包括经配置以俘获场景的视频的图像传感器。所述系统进一步包括经配置以提供来自视频俘获装置的定向数据的惯性测量单元。所述系统进一步包括旋转模块，其经配置以基于定向数据产生旋转矩阵且调整所俘获视频的定向以与场景的真实定向匹配。所述系统进一步包括经配置以编码所述经调整的所俘获视频的编码器。在另一实施例中，本发明提供一种用于编码视频俘获装置上俘获的视频的系统。所述系统进一步包括用于在俘获场景的视频时读取来自视频俘获装置的定向数据的装置。所述系统进一步包括用于基于定向数据产生旋转矩阵的装置。所述系统进一步包括用于调整所俘获视频的定向以与场景的真实定向匹配的装置。所述系统进一步包括用于编码所述经调整的所俘获视频的装置。

附图说明

图1为根据本发明的一个实施例显示屏上的场景俘获和图像变换的说明。

图2为根据本发明的一个实施例的系统级概观的框图。

图3为展示用于所俘获视频的定向调整的过程的概观的流程图。

图4为展示用于读取来自加速计单元的数据的过程的概观的流程图。

图5为展示用于基于旋转矩阵调整视频定向的过程的概观的流程图。

具体实施方式

本发明的实施例涉及用于基于从传感器收集的与视频俘获装置相关联的数据调整所俘获视频的定向的系统和方法。举例来说，可基于从建构到视频俘获装置中的重力传感器或加速计单元俘获的定向数据调整所俘获视频的定向。特定来说，大部分现代移动电话包含具有视频和图像俘获功能的内置相机。举例来说，典型的现今移动电话相机可提供以至多每秒30帧记录视频的能力。

此外，移动电话经常包括建构到装置中用于用户接口控制的加速计。加速计测量在某一时刻施加到装置的力。这些力可用于确定用户移动装置的方向且因此提供定向数据。加速度值表达为表示X、Y和Z轴中的加速度分量的3维向量。加速度的定向可相对于所述装置使得当装置在水平桌子上面朝上时在Z轴中施加1g，且当装置放置为垂直于桌面时沿着Y轴施加1g。加速计可用于基于电话的定向或装置如何被用户固持而在装置的屏幕上呈现图像或视频的风景或肖像视图。

在视频记录期间，如上文所论述，所俘获视频的定向未必与场景中所俘获对象的“真实定向”匹配。举例来说，如果在记录期间视频记录装置倾斜或旋转一角度，那么所俘获视频当在装置上重放时将旋转相同角度。因此，当视频在移动装置屏幕上重放时所记录视频可看上去“倾斜”或“旋转”，同时保持在正常垂直或水平定向中。此外，如果视频经发射或存储以供在另一装置(例如，电视机)上重放，那么视频也将呈现为旋转或倾斜其在移动装置上记录期间所倾斜的相同的角度。然而，如本文中所论述，实施例可使用从视频装置传感器所俘获的数据来恰当地定向装置以供重放。作为一个实例，一旦读取加速计数据，所述数据就可用于计算旋转矩阵以校正倾斜的视频定向使得视频将以在正常定向中重放的方式编码。

图1为展示通过视频俘获装置120记录的树110的旋转定向的场景100的一个实施例的说明。视频俘获装置120可包括移动电话、平板PC、数码相机或包括内置式位置传感器(例如，加速计或惯性测量单元)的任何记录装置。