[发明专利]用红外成像区分前景和背景

说明书

标识红外图像内包括呈现在预定义范围内的红外强度值的像素的初始候选前景区域。基于初始候选前景区域的像素的红外强度值估计初始候选前景区域内的表面的深度。基于身体‑模型估计，将初始候选前景区域扩展为经扩展候选前景区域。身体模型估计以初始候选前景区域、表面的深度，和/或通过面部识别标识的人类受试者的面部中的一个或多个为种子。基于红外图像的每个像素相对于经扩展候选前景区域的距离，该像素被标识为前景像素或背景像素之一。被标识为背景像素的像素可在对应可见光图像内被修改。

背景

现代通信网络允许人们通过共享视频或静态图像彼此通信。实时视频会议是这种形式的通信的一个示例。包含相机的移动设备(诸如智能电话或平板计算机)的普及使得用户能够捕捉视频或静态图像并将其与来自几乎任务位置的其它用户共享。

概述

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中所提及的任何或所有缺点的实现。

标识红外图像内包括呈现在预定义范围内的红外强度值的像素的初始候选前景区域。基于初始候选前景区域内的像素的红外强度值，估计初始候选前景区域内的表面的深度。基于身体-模型估计，将初始候选前景区域扩展为经扩展候选前景区域。身体模型估计以初始候选前景区域、表面的深度，和/或通过面部识别在初始候选前景区域内标识的人类受试者的面部中的一个或多个为种子(seed)。基于红外图像的每个像素相对于经扩展候选前景区域的距离，将该像素标识为前景像素或背景像素之一。被标识为背景像素的像素可在对应可见光图像内被修改。

附图简述

图1描绘了其中针对红外和可见光对场景成像的示例使用环境。

图2是描绘用于通过在相应IR图像中区分前景与背景来修改VL图像的示例成像方法的流程图。

图3是描绘用于标识红外图像内的前景和背景像素的示例成像方法的流程图。

图4是描绘用于标识红外图像内的前景和背景像素的示例处理流水线的示意图。

图5是描绘一种示例计算系统的示意图。

详细描述

深度成像可在各种上下文中使用，诸如用于人类身体部位跟踪的自然用户界面、前景对象从背景对象的绿色筛选、以及对象的三维(3D)扫描。用于深度成像的先前方案依赖于专门的深度相机，该深度相机通常使用立体成像、结构化照射和/或飞行时间来检测深度。这些专门的深度相机尚未胜过目前被集成在各种消费者电子产品中的传统二维(2D)相机的普遍性。对专门的深度相机的依赖可能限制深度相机的采用，这是由于其增加的能耗、增加的计算处理功率、增加的成本、以及设备形状因子约束的考虑。

本公开涉及通过使用场景的红外(IR)成像将图像内的前景与背景区分开，即使使用的是非结构化、漫射IR和/或近IR照射的不可见形式。图1描绘了其中针对IR和可见光(VL)对场景成像的示例使用环境100。

在使用环境100内，用户110操作计算设备112来捕捉场景114的图像或视频。在此特定示例中，计算设备112采用手持式移动客户端计算设备(例如智能电话)的形式。然而，计算设备112可采用其它适当形式。