[发明专利]一种应用于多虚拟演播室的前后景分离方法及系统

说明书

本申请公开了一种应用于多虚拟演播室的前后景分离方法及系统，包括：获取摄像机图像与虚拟场景投影图像；依据匹配上的特征点计算所述摄像机图像与虚拟场景投影图像单应变换矩阵，使用计算出的单应变换矩阵将所述摄像机图像与虚拟场景投影图像进行网格细分处理，计算对应网格的差的绝对值的和，以将一个虚拟演播室的场景传送给另一个虚拟演播室的场景。实现使用者可以在自己的场内看到另外一个场景的前景。使本场景内的使用者实时获得其他场景内使用者的反馈的同时允许摄像机同时获得本场景的图像与其他场景的前景叠加，减少了后期图像处理的工作量。

技术领域

本发明涉及一种应用于多虚拟演播室的前后景分离方法及系统。

背景技术

传统的多演播室互动技术往往依赖于绿幕布抠像后在后期视频处理中叠加到视频中，其技术手段本质上无法为使用者实时提供反馈，使用者往往无法做到掌握演播室的实时信息。且在后期处理图像中需要大量的工作。

虚拟演播室是基于摄像机的姿态将已有的虚拟场景投影到屏幕上，在摄制过程中不需要额外的场景道具，就可以让使用者置身于虚拟场景中。区别于传统的道具场景布局或绿幕布场景，虚拟演播室在不使用道具场景的同时可以为使用者提供场景的互动与反馈。

近几年来，应用于多虚拟演播室的前后景分离在节目制作，广告行业有着越来越广泛的应用。应用于多虚拟演播室的前后景分离使用多块屏幕搭建出立方体舞台。依据摄像机的位置和投影模型计算出虚拟场景在屏幕位置的投影图像，在不耗费资源搭建出现实场景的同时让使用者和观众有身临其境的互动体验。然而，在需要多个虚拟演播室进行互动时，需要将不在现场的使用者(演员，主持人等)影像与现场录制的图像进行叠加以实现特有的节目效果。现有技术无法实现在多个虚拟演播室进行互动时，信息实时反馈，以及需要大量后期抠图和处理图像的目的。

发明内容

本发明的目的在于克服上述不足，提供一种应用于多虚拟演播室的前后景分离方法及系统，解决以往的多演播室互动时，信息无法做到实时反馈，大量后期抠图和处理图像的问题。

为了实现上述目的，本发明采用的技术方案为：一种应用于多虚拟演播室的前后景分离方法，其特征在于，包括：

获取摄像机图像与虚拟场景投影图像；依据匹配上的特征点计算所述摄像机图像与虚拟场景投影图像单应变换矩阵，使用计算出的单应变换矩阵将所述摄像机图像与虚拟场景投影图像进行网格细分处理，计算对应网格的差的绝对值的和，以将一个虚拟演播室的场景传送给另一个虚拟演播室的场景。

进一步地，依据匹配上的特征点计算是根据ORB特征点检测方法。

进一步地，还包括：将前景图像通过网络广播出去。

本发明的另一目的在于提供一种应用于多虚拟演播室的前后景分离系统，其特征在于，包括：

获取单元，用于获取摄像机图像与虚拟场景投影图像；

处理单元，用于依据匹配上的特征点计算所述摄像机图像与虚拟场景投影图像单应变换矩阵，使用计算出的单应变换矩阵将所述摄像机图像与虚拟场景投影图像进行网格细分处理，计算对应网格的差的绝对值的和，以将一个虚拟演播室的场景传送给另一个虚拟演播室的场景。

本发明的有益效果为：

实现简单，包括：获取摄像机图像与虚拟场景投影图像；依据匹配上的特征点计算所述摄像机图像与虚拟场景投影图像单应变换矩阵，使用计算出的单应变换矩阵将所述摄像机图像与虚拟场景投影图像进行网格细分处理，计算对应网格的差的绝对值的和，以将一个虚拟演播室的场景传送给另一个虚拟演播室的场景。实现使用者可以在自己的场内看到另外一个场景的前景。使本场景内的使用者实时获得其他场景内使用者的反馈的同时允许摄像机同时获得本场景的图像与其他场景的前景叠加，减少了后期图像处理的工作量。

附图说明