[发明专利]视频捕捉系统和方法

说明书

视频捕捉技术包括：确定主体相对于多个相机的位置；至少基于所确定的位置从各相机中选择前景相机；获取由该前景相机捕捉的RGB图像；分割RGB图像以标识与该主体对应的前景部分，其中该前景部分的总高度是RGB图像的总高度的第一百分比；从前景部分生成前景图像；产生合成图像，包括合成前景图像和背景图像以产生合成图像的一部分，其中该合成图像中的前景图像的总高度是该合成图像的总高度的第二百分比，并且该第二百分比显著小于该第一百分比；以及使得合成图像被显示在远程系统上。

背景

视频会议技术已经变得越来越普遍。此类技术现已在全球范围内用于各种各样的个人和企业通信。例如，在电话会议或其他视频会议会话期间，个人可以通过由数字相机捕捉并传送给参与者的图像和声音来“互动”和参与面对面的对话。人们越来越依赖此类基于网络的视频会议以及视频聊天应用和服务，诸如Google和然而，参与者不保持相对静止的视频会议在图像捕捉和显示质量方面继续面临重大挑战。

在一些情况下，可能存在一些视频会议，其中参与者希望在其环境中移动、和/或其中可能在一个房间中存在多个参与者向其他远程用户或接收方传送数据。其中存在(一个或多个)参与者相对于相机或彼此的位置实时变化的视频会议会话可能会妨碍为远程用户捕捉该(一个或多个)参与者的一致或可靠视图。例如，当参与者靠近视频相机移动时(诸如与靠近相机的显示器进行交互时)，参与者可能会遮挡远程用户对环境的查看。这可能会因多个参与者的存在而更加复杂。在此类情形中，辨别静止参与者的面部和/或表情的能力可能会受到限制。尽管已经采用了各种技术来提高视频会议的质量，但在视频会议会话中捕捉和演示视频的新的和改进的想法方面仍然存在很大空间。

概述

公开了一种视频捕捉系统。该视频捕捉系统包括：多个相机，该多个相机被配置成捕捉RGB图像；以及前景相机选择器，该前景相机选择器被配置成基于第一主体相对于多个相机的第一位置来选择多个相机中的一个作为第一前景相机。此外，该系统包括：前景分割器，该前景分割器被配置成接收由第一前景相机捕捉的第一RGB图像，并标识该第一RGB图像的第一前景部分，其中该第一前景部分对应于第一主体，并且其中该第一前景部分的总高度为第一RGB图像的总高度的第一百分比。此外，该系统包括：前景图像生成器，该前景图像生成器被配置成根据第一RGB图像的第一前景部分生成第一前景图像；以及图像合成器。图像合成器被配置成根据第一前景图像和第一背景图像生成第一合成图像的第一部分，其中第一合成图像中的第一前景图像的总高度是第一合成图像的总高度的第二百分比，并且第二百分比显著小于第一百分比。该系统还包括：图像编码器，该图像编码器被配置成对第一合成图像进行编码以传输到远程系统。

在另一实现中，公开了一种方法，其中该方法包括：确定第一主体相对于多个相机的第一位置；至少基于所确定的第一位置从多个相机中选择第一前景相机；以及获取由第一前景相机捕捉的第一RGB图像。该方法进一步包括：分割第一RGB图像以标识第一RGB图像的第一前景部分，该第一前景部分对应于第一主体，其中第一前景部分的总高度为第一RGB图像的总高度的第一百分比；以及根据第一RGB图像的第一前景部分生成第一前景图像。此外，该方法包括：产生第一合成图像，包括合成第一前景图像和第一背景图像以产生第一合成图像的一部分，其中第一合成图像中的第一前景图像的总高度是第一合成图像的总高度的第二百分比，并且第二百分比显著小于第一百分比；以及然后使得第一合成图像被显示在远程系统上。

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的概念的选集。本概述并不旨在标识所要求保护的主题的关键特征或必要特征，亦非旨在用于限制所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中提及的任何或所有缺点的实现。

附图简述

附图仅通过示例而非限制的方式描绘了根据本教导的一种或多种实现。在附图中，相同的附图标记指代相同或相似的元素。此外，应当理解，附图不必按比例绘制。