[发明专利]用于确定深度细化图像捕获指令的方法、存储设备和系统

说明书

本发明的各实施方式总体上涉及用于深度图细化的数字相机的设置。具体地，公开了用于标识可以被用来细化现有的深度图的用于捕获图像的深度细化图像捕获指令的系统和方法。通过在与现有的深度图对应的现有图像中的每个图像分块处评估在配置设置的集合上的一系列可能的深度值来确定深度细化图像捕获指令。每系列可能的深度值与现有的深度图的现有的深度估计对应。这一评估使得能够以如下方式选择一个或多个配置设置：该方式使得将存在能够从利用所选择的配置设置捕获的一个或多个附加图像得到的附加深度信息。当使用一个或多个附加图像生成细化的深度图时，这一附加深度信息被用来增加用于来自现有的深度图的至少一个深度估计的深度精度。

相关申请的交叉引用

本申请涉及2014年11月24日提交的共同待决的美国申请序列号14/552,332以及与此同时提交的美国申请序列号____，上述每个申请的全部内容由此通过引用被合并。

技术领域

本公开内容总体上涉及用于确定用于数字相机以及要由数字相机使用这些设置来捕获的大量图像的配置设置以改进深度信息的方法和系统。

版权通知

本专利文档的公开内容的一部分包含涉及版权保护的材料。版权拥有者不反对任何人对专利文档或者专利公开的拓制，因为其出现在专利和商标局的专利文件或者记录中，但是另外无论如何保留所有版权权利。

背景技术

数字相机(包括集成到移动设备中的数字单镜头反射(DSLR)相机和数字相机)通常具有使得用户能够使用不同用户的定义的和相机定义的配置设置的组合来捕获数字图像的复杂的硬件和软件。数字图像提供特定场景的数字表示。随后可以通过其自身或者与场景的其他图像的组合来处理数字图像，以从图像中取得附加信息。例如，可以处理场景的一个或多个图像以估计在场景内描绘的对象的深度，即，每个对象到从该处得到图像的位置的距离。用于场景中的每个对象的深度估计或者可能的图像内的每个像素被包括在称为“深度图”的文件中。其中，深度图可以用于改善现有的图像编辑技术(例如剪切、孔洞填充、到图像的层的复制等)。

传统上，使用各种技术之一来生成深度图。这样的技术包括来自散焦技术的深度，其使用焦距未对准的模糊来估计成像场景的深度。使用这样的技术的深度估计是可能的，因为成像的场景位置取决于用以得到图像的相机配置设置(例如光圈设置和焦距设置)而将具有不同量的焦距未对准的模糊(即深度信息)。估计深度因此包括估计不同场景位置处的大量深度信息，深度信息从场景的一个图像还是从场景的多个图像取得。传统上，这样的深度估计的精度取决于所使用的图像的数目。通常而言，输入的图像的数目越大，能够针对场景中的任何一个位置(例如像素)而被比较的深度信息的量就越大。

因此，来自散焦技术的很多传统的深度可能需要输入图像的大量集合以便以更高的确定程度来估计场景深度。然而，传统的技术不能预测性地确定可选数目的图像以及以任何特定的确定程度来估计场景深度图所需要的对应的相机配置设置。传统的技术也不能用于分析现有的深度图以预测性地确定可以使用特定相机配置设置来捕获的场景的大量附加图像，使得足够多的深度信息会可用于细化现有的深度图(即改善其深度估计的精度)。

因此，期望提供用于分析现有的深度图或者其他场景深度信息以预测性地确定场景的要捕获的大量附加图像以及用于捕获其的相机配置设置的改进的解决方案，使得足够的深度信息可用于细化由现有的深度图或者其他的场景深度信息提供的深度估计。

发明内容