[发明专利]使用划界框的辅助信息进行多层视频合成

说明书

相关申请的交叉引用 

本申请涉及2006年10月23日提交的题为“Video Composition Optimization by the Identification of Transparent and Opaque Regions(通过透明和不透明区域的标识的视频合成优化)”的美国专利申请S/N11/584,903(代理人案号为No.P23806)，其整个内容通过引用结合于此。 

背景 

要求保护的发明实现一般涉及多层视频合成和其中的图形和子图信息的处理。 

已经将更大的交互性增加到诸如HD DVD和蓝光之类的较新的高清晰度视频回放系统。例如，如图1所示，HD DVD系统100可要求播放器支持四(或更多)层视频和图形面被合成，每个这样的层可具有按面和/或按像素的α值(用于指定半透明度的量)。图形面110可以例如以适当速率从文件高速缓存渲染，且可具有按像素(pel)的α半透明度。子图面120可以例如以适当速率或在总共30mpbs内从文件高速缓存渲染，且可具有按像素的α和/或按面的α半透明度值。出于完整性，主视频面可包括高清晰度视频(例如，以＜29.97mbps的1080i60)，且附加视频面可包括标准清晰度视频(例如，以＜4-6mbps的480i60)。 

图形和/或子图面110/120可能在合成引擎(也称为合成器)的带宽和工作负载中占支配地位。需要支持全尺寸面110/120的按像素的合成的播放器可能消耗总共可用读/写带宽的相当大的部分。例如，这种合成还可能对移动平台造成很大功率负担。 

很多使用需要大的图形面。某些应用趋向于将图形置于外围区域(例如，顶部垂幕、底部弹出菜单、脚注、具有置于一定距离处的图形标识的字幕)。在很多情形中，大多数图形和/或子图像素是透明的。例如，如果面110/120 中90％的像素是透明的，则可能会不必要地花费60-70％的合成带宽和吞吐量。 

附图简述 

结合在本说明书中并构成其一部分的附图示出与本发明的原理一致的一个或多个实现，且与描述一起解释这些实现。附图不一定是按比例绘制的，相反重点放在示出本发明的原理。在附图中： 

图1示出常规的高清晰度分层视频格式； 

图2示出合成包括图形和/或子图信息的多层视频的系统； 

图3A概念性地示出用于合成的划界框(bounding box)和对应的绘制矩形； 

图3B概念性地示出图形和合成区中的划界框和绘制矩形；以及 

图4示出利用划界框和绘制矩形来合成的方法。 

详细描述 

以下的详细描述涉及附图。在不同的附图中使用相同的附图标记以标识相同或相似的元件。在以下的描述中，为了解释而非限制的目的，阐述了诸如特定结构、架构、界面、技术等具体细节，以便提供对所要求保护的发明的各方面的全面理解。然而，受益于本公开的本领域的技术人员显而易见的是可在脱离这些特定细节的其它实施例中实施所要求保护的发明的各方面。在某些示例中，省略了公知的设备、电路和方法的描述以免因不必要的细节而淡化本发明的描述。 

图2示出合成包括图形和/或子图信息的多层视频的系统200。系统200可包括视频信息的源210，诸如主视频面和/或附加视频面(也可称为子视频面)。源210可将其视频信息的面(或多个面)输出到合成器240，用于与子图和/或图形信息合成。 

系统200还可包括子图或图形渲染器220。渲染器220可包括子图渲染器和图形渲染器之一或两者。因此，渲染器220可根据要渲染的内容接收子图比特流和/或图形语言和控制信息。应当注意渲染器220可包括两个功能分离的用于子图和图形的渲染器，但为了便于解释在图2中示为一个元件。在某些实现中，渲染器220可渲染整个图形面110和/或子图面120并将这些输出到合 成器240。 

除将经渲染的子图和/或图形面输出到合成器240外，渲染器220还可将包括划界信息(例如划界框或绘制矩形)的消息输出到合成控制器。这种划界信息可指定输出到合成器的非透明子图或图形对象的空间范围，以下将更详细地解释。应当注意，可认为这种划界信息是“辅助的”，意思是如果它不存在则整个图形和/或子图面将由渲染器220绘制或渲染并由合成器240合成。