[发明专利]对象数字化

说明书

背景

现代游戏和因特网技术与过去的那些技术相比以更加个人的方式来与用户交互。现今的游戏系统可读取站立在相机前面的玩家的移动或玩家通过无线控制器采取的行动（例如如同棒球棒那样挥动控制器）以取代在连接到游戏控制台的控制器上简单地敲击按键。这种个人交互开拓出一个完全崭新的游戏领域。

概述

提供本概述是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识出所要求保护的主题的关键特征或必要特征。本概述也不是意在帮助确定所要求的主题的范围。

一个方面旨在创建图像中对象的数字表示（“数字化”）。用户将对象呈现给相机，相机捕捉该对象的前面和背面的包括颜色和深度数据的图像。对于前面和背面图像这两者，通过分析深度数据来确定最接近相机的点。从这些最接近的点中，可以通过标注深度数据中的大的差异来找到该对象的边缘。深度数据也被用于构建该对象的前面和背面的点云构造。将各种技术应用于推断边缘、移除接缝、智能扩展颜色、过滤噪声、将骨架结构应用于该对象以及进一步优化数字化。最后，将数字表示呈现给用户并在不同的应用（例如游戏、Web等）中潜在使用。

附图说明

下面将参考附图详细描述本发明的说明性实施例，在附图中：

图1描绘了适用于实现在此讨论的各实施例的示例性计算环境的框图。

图2是根据一个实施例的呈现用于数字化的对象的用户的图示。

图3是根据一个实施例的用于将对象进行数字化的工作流程的图示。

图4A和4B是根据一个实施例的呈现用于数字化的对象的用户的相机观看视角的图示。

图5是根据一个实施例的可用于对对象进行数字化的分割深度图像的图示。

图6是根据一个实施例的深度对颜色的偏移的图示。

图7是根据一个实施例的可用于对对象进行数字化的源色彩图像的图示。

图8是根据一个实施例的所捕捉的对象的色彩分割的图示。

图9和10是根据一个实施例的用于保持要被数字化的对象的用户界面(UI)指导的图示。

图11是根据一个实施例的对象的三维(3D)点云构造的图示。

图12是根据一个实施例的对齐的点片（point sheets）的两个视图的图示。

图13是根据一个实施例的最终的点云构造的图示。

图14是根据一个实施例的显示经数字化的对象的确认图像的UI的图示，所述经数字化的对象被显示给用户。

图15是根据一个实施例的所捕捉的对象的网格输出的图示。

图16是根据一个实施例的经平滑和处理的对象的图像的图示。

图17是根据一个实施例的具有UV坐标的图像的图示。

图18是根据一个实施例的将面朝前的三角边缘绘制到最终的纹理图的截面的图示。

图19A-19E是根据一个实施例的示出要添加到所生成的骨架结构的不同骨头处的加权的图示。

图20A和20B是根据一个实施例的示出在亮度/色度处理之前和之后的图示。

图21A和21B是根据一个实施例的示出在对边缘进行滤波之后的源和输出图像的图示。

图22A和22B是根据一个实施例的示出在其中所述边缘修复滤波器查找到背景颜色和目标对象颜色的图像的图示。

图23A和23B是根据一个实施例的示出从边缘到争议区域的距离以及所计算的背景似然值的图像的图示。

图24是根据一个实施例的最终的合成纹理图的图示。

图25A和25B是根据一个实施例的屏蔽值和重度模糊化的顶点色彩的图示。

图26A和26B是根据一个实施例的仅具有纹理和具有混合了屏蔽值的顶点色彩的纹理的不同的网格的图示。

图27是根据一个实施例的经数字化的对象的最终呈现的图示。

图28是根据一个实施例的用于详细描述将对象进行数字化的工作流程的流程图。

图29是根据一个实施例的用于详细描述将对象数字化的工作流程的流程图。

详细描述

本文中用细节来描述本发明各实施例的主题以满足法定要求。然而，该描述本身并非旨在必定限制权利要求的范围。相反，所要求保护的主题可结合其他当前或未来技术按照其他方式来具体化，以包括不同的步骤或类似于本文中所描述的步骤的步骤组合。术语不应被解释为暗示本文所公开的各步骤之中或之间的任何特定次序，除非且除了在明确描述个别步骤的次序的时候。