[发明专利]用于将用户特定内容融合到视频制作中的方法和系统

说明书

通常，提供了用于将观看者特定图形内容融合到被广播到多个观看者终端的视频内容中的方法。该方法可以包括下列步骤：接收包括表示场景的多个帧的视频内容；为视频内容的帧子集导出虚拟摄像机模型；为视频内容的帧子集的每一帧生成前景掩模；以及使用相应帧的虚拟摄像机模型，在多个观看者终端中的至少一些上接收的视频内容的帧子集的帧的至少部分中，用与相应的观看者终端相关联的观看者特定图形内容的像素替换被包含在场景中的背景表面的预定内容插入区域内的相应帧中的除了由相应的帧的前景掩模指示的像素以外的所有像素。

发明领域

本发明涉及视频制作的领域，且更具体地涉及将用户定制的内容融合到视频广播中。

发明背景

近年来随着专用硬件和软件的引入，体育赛事的自动视频内容制作变得越来越流行。多年来，人们建议可以以将使观看者能够观看视频广播的方式将广告融合到视频内容中，表面的一些部分展示广告内容。

然而，主要由于在所融合的内容和前景对象之间的障碍干扰，许多挑战且特别是与在前景对象(例如，运动员)和背景表面之间的关系相关的那些挑战阻止令人满意的结果。

发明概述

本发明的一个方面提供了一种将观看者特定图形内容融合到被广播到多个观看者终端的视频内容中的方法，该方法可以包括：由视频处理服务器接收包括多个帧的视频内容，其中多个帧中的每一个表示包括背景表面和感兴趣对象的场景；由视频处理服务器为多个帧的帧子集的每个帧导出虚拟摄像机模型，该虚拟摄像机模型将相应帧的每个像素与在场景中的与其像素相关联的真实世界地理位置相关联；由视频处理服务器为帧子集的每一帧生成包括与感兴趣对象相关的像素的前景掩模；以及由多个观看者终端中的至少一些使用相应帧的虚拟摄像机模型在视频内容的帧子集的帧的至少部分中用与其观看者终端相关联的观看者特定图形内容的像素替换被包含在背景表面的至少一个预定内容插入区域内的相应帧中除了由相应帧的前景掩模指示的像素以外的所有像素。

本发明的另一个方面提供了一种用于将观看者特定图形内容融合到被广播到多个观看者终端的视频内容中的系统，该系统可以包括：视频处理服务器，其被布置成：接收包括多个帧的视频内容，其中多个帧中的每一个表示包括背景表面和感兴趣对象的场景；为视频内容的多个帧的帧子集导出虚拟摄像机模型，该虚拟摄像机模型将相应帧的每个像素与在场景中的与其像素相关联的真实世界地理位置相关联；以及为帧子集的每一帧生成包括与感兴趣对象相关的像素的前景掩模；以及与视频处理服务器通信的多个观看者终端，其中多个观看者终端中的至少一些被布置成使用相应虚拟摄像机模型在帧子集的帧的至少部分中用与相应观看者终端相关联的观看者特定图形内容的像素替换被包含在背景表面的预定内容插入区域内的在相应帧中除了由相应的前景掩模指示为与感兴趣对象相关的像素以外的所有像素。

本发明的这些、额外和/或其他方面和/或优点在接下来的详细描述中被阐述；可能从详细描述可推断出；和/或通过本发明的实践可获悉。

附图简述

为本发明的实施例的更好理解并示出其可以如何被实施，现在将纯粹作为例子参考附图，其中相似的数字始终表示相应的元件或部分。

在附图中：

图1A、1B和1C是根据本发明的一些实施例的用于将观看者特定图形内容融合到被广播到多个用户终端的视频内容中的系统的各种配置的示意图；

图2A、2B和2C是根据本发明的一些实施例的用于将观看者特定内容融合到被广播到多个用户终端的视频内容中的系统的更详细方面的各种配置的示意图；以及

图3是示出根据本发明的一些实施例的将观看者特定内容融合到被广播到多个观看者终端的视频内容中的方法的流程图。

将认识到，为了说明的简单和清楚，在图中所示的元件不一定按比例绘制。例如，为了清楚起见，一些元件的尺寸可以相对于其他元件被放大。此外，在被认为适当的情况下，参考数字可在多个图当中重复以指示对应的或类似的元件。