[发明专利]照明集成

说明书

一种形成增强图像数据的方法，该方法包括：形成主图像馈送，该主图像馈送显示被照明单元照亮的对象；估计照明单元的位置；接收覆盖数据，覆盖数据限定三维外观的覆盖；根据所估计的位置渲染覆盖数据，以形成增强图像馈送；以及在主图像馈送上覆盖增强图像馈送，以形成辅图像馈送。

本发明涉及例如在视频制作中协调照明的外观。

在已知颜色的背景下拍摄演员、演讲者、动画模型和其他物理对象是众所周知的。常规上，背景是绿色幕(screen)。然后，可以对所得视频馈送进行编辑，以将绿色背景替换为其他伪像，例如风景、计算机生成的动画或统计图，从而创建增强的视频馈送。当覆盖的伪像具有三维外观时，如果以与演讲者不同的方式对这些伪像进行照明，则会降低最终产品的逼真感。

期望能够更容易地产生逼真的增强视频或静态照片产品。

根据本发明，提供了如所附权利要求中阐述的方法/装置。

现在将参考附图通过示例的方式描述本发明。

在附图中：

图1示出了实现视频覆盖的系统。

图2示出了标记示例。

图3示出了环境中的标记样式以及由诸如摄像头之类的成像设备捕获的帧。

图4示出了捕获的视频帧。

图5示出了增强的视频帧。

图1的系统包括工作室1，工作室1具有已知颜色或样式的背景2。在此情况下，背景为绿色幕。被摄体(subject)3(在这种情况下是演讲者)位于绿色幕之前。摄像头4被定位以在背景2下拍摄被摄体3。在此情况下，摄像头是视频摄像头，该视频摄像头生成其视场视图的视频馈送，但摄像头也可以是静态摄像头，该静态摄像头生成其视场的照片。摄像头被定位成使得该摄像头的视场包括被摄体和至少一些背景。摄像头可以是手持式、落地式或以任何其他方便的支承方式。摄像头可以方便地在工作室内移动。照明单元5位于工作室中。照明单元被定位成照亮被摄体。照明单元可以以任何方便的方式实现。它可以是落地式、吊顶式或手持式。照明单元可以方便地在工作室内移动。在进行拍摄时，摄像头和/或照明单元可能会移动。可能有多个摄像头，各摄像头生成相应的视频馈送。可能有多个摄像头同时照亮被摄体。

在进行拍摄时，照明单元被定位成从所期望的角度照亮被摄体，并且摄像头被定位成从所期望的角度拍摄被摄体。然后，被摄体在被摄像头拍摄的同时以适当的方式表演。摄像头形成该表演的视频馈送。在视频馈送中，可以在已知背景2下看到被摄体。

摄像头4和照明单元5设有允许估计它们在工作室中的位置的机构。这些机构可以是无线电定位系统，例如，在已知定位使用摄像头/照明单元与信标之间的飞行时间对摄像头和照明单元的位置进行三边测量。更优选地，摄像头和照明单元设有如EP2962284中所描述的定位系统。