[发明专利]将视频图像适配到小屏幕尺寸的方法

说明书

技术领域

本申请涉及的发明是一种将视频图像适配到小屏幕尺寸，尤其是适配到便携手持终端的小屏幕尺寸的方法。

背景技术

移动TV(移动电视)是一个正在成长且显然具有前景的市场。它允许在小便携式设备，例如手机、智能手机或者PDA(个人数字助理)上接收电视信号。这些小便携设备屏幕上的显示不提供例如如同所知的来自家庭固定电视机(当前的SDTV，标准清晰度电视)的详细图像。不管这样的观看条件的重要区别，在移动和固定电视系统的屏幕上主要显示相同的内容。然而，制作单独的用于移动电视的节目将导致人力资源的巨大开销，以及广播公司几乎不能支持的成本的增加。

为克服这种令人不适的情况，提出了一些建议以通过将部分视频剪出(crop)来将具有高图像分辨率的视频内容适配到更小的显示器。这些建议通过普通视频分析方法基于特征提取来处理感兴趣区域(ROI)的自动检测。视频信号中检测到的感兴趣区域用于找到足够的剪出(剪切)区域并且组成包含适于手特设备显示器的所有相关信息的新图像。

然而，这种已知剪出系统不足以处理更广范围的内容，因为其缺少语义知识和通用的定义方法。

发明内容

本发明的一个目的是通过获取用于手持设备的小尺寸显示器的更广范围内容的覆盖以改进剪出系统。

以上目的通过一种方法实现，该方法开始于元数据聚合和相应视频，例如在后期制作、节目交换和归档中，其中

(a)使视频经过视频分析以传输视频，例如通过使用运动检测、形态学滤波、边缘检测等，

(b)独立的视频和元数据被组合以提取上下文中的重要特征，其中来自元数据的重要信息被分类并用于初始化适于传输的视频内容的特征提取步骤的动态适应序列，

(c)提取出的重要特征被组合以定义感兴趣区域(ROI)，所述感兴趣区域通过目标跟踪在连续视频帧中进行搜索，所述目标跟踪在连续视频帧中识别每个初始化的ROI的新位置和变形并且将该信息返回到特征提取，从而获得所述特征提取和所述目标跟踪之间的持久通信，

(d)一个或数个ROI被提取出来，并且一个视频帧接一个视频帧地输入到剪出步骤，

(e)基于权重信息，通过以重要性归类所述提供的ROI，构成良好的图像部分被剪出，以及

(f)所述剪出图像区域被缩放到期望的小屏幕尺寸。

有利地，本发明借助于可用元数据以剪出重要图像区域并将它们适配到具有低分辨率的显示器上，来提供视频信号中的特征提取。

附图说明

现在将参考附图描述本发明的特定实施例，其中

图1示出了执行本发明方法的整个系统的示意框图；

图2到5示出了附图1中系统的各种框图；

附图6示出用来检测感兴趣区域(ROI)的初始化特征提取方法的例子；以及

图7是原始图像和剪出图像的比较。

具体实施方式

本发明的目的在于基于文件的制作格式(基于从磁带记录到非磁带记录的转移)，其允许将各种元数据用于后期制作、节目交换和归档。这些元数据包含在包括视频数据和元数据的容器格式中。这种元数据包括内容相关的信息，其描述了风格的类型以及关于制作过程细节的特定信息。使得生成的元数据在包括视频和元数据的容器格式中可用。该容器格式允许以同步方式的不同数据的多路传输，或者作为文件或流。元数据信息和已知特征提取方法的组合形成创造性的方法，其单独地可适于大范围的内容。

根据附图1的整个系统示出了包括三个块1、2和3的框图。视频和元数据被输入块1。元数据可以从一个或数个源聚合。在下一步中，数据集合被解析且重要信息通过有用的结构分类。结果数据发送到块2，部分发送到块3。视频内容经由“视频”输出线传输到块2。块2是执行镜头检测步骤和特征提取以及随后目标跟踪步骤的特征提取模块，如参考附图3详细描述的那样。块2执行的特征提取导致n个提取出的ROI，其被送入块3。块3是产生在手持设备的较小尺寸显示器上显示的剪出区域的剪出模块。这个模块可置于制作侧或终端设备中。