[发明专利]用于确定深度细化图像捕获指令的方法、存储设备和系统

权利要求书

1.一种计算机实现的方法，用于通过预测性地确定将要由相机使用的配置设置来确定深度细化图像捕获指令，所述配置设置将要由所述相机使用以捕获场景的至少一个下一图像，所述深度细化图像捕获指令用于细化与所述场景的现有图像对应的现有的深度图中的深度估计，所述方法包括：

通过计算机系统标识所述现有图像的多个图像分块；

通过所述计算机系统确定与所述图像分块中的每个图像分块对应的深度范围，所述深度范围包括用于对应的所述图像分块的可能的深度值；

通过所述计算机系统使用在对应的所述可能的深度值中的每个对应的可能的深度值处的多个配置设置中的每个配置设置来评估所述图像分块中的每个图像分块，以确定用于所述图像分块的深度精度的可能的增加量，所述深度精度的可能的增加量能够在所述场景的至少一个下一图像被所述相机使用所述配置设置捕获的情况下通过解释来自所述至少一个下一图像的附加深度信息而被实现，所述配置设置中的每个配置设置包括光圈设置和焦距设置中的至少一项；以及

通过所述计算机系统并且基于用于每个图像分块的深度精度的所述可能的增加量来生成至少一个深度细化图像捕获指令，每个深度细化图像捕获指令包括所述配置设置中的至少一个配置设置，其中在使用所述配置设置中的所述至少一个配置设置捕获所述至少一个下一图像时，根据所述至少一个下一图像得到的所述附加深度信息将导致在所述现有的深度图中用于至少一个深度估计的深度精度的增加。

2.根据权利要求1所述的计算机实现的方法，其中所述深度范围至少部分基于不确定性的测量以及深度似然图中的至少一项而被确定。

3.根据权利要求1所述的计算机实现的方法，其中在对应的所述深度范围中的所述可能的深度值中的每个可能的深度值处使用所述配置设置中的每个配置设置来评估所述图像分块中的每个图像分块包括：

标识与所述可能的深度值中的每个可能的深度值和所述配置设置对应的模糊核心；

对于每个模糊核心，通过利用所述模糊核心模糊全景对焦图像的全景对焦图像分块来确定仿真图像分块，所述仿真图像分块与所述现有图像的所述图像分块对应；以及

针对每个配置设置，基于所述仿真图像分块来确定用于所述图像分块的深度精度的所述可能的增加量。

4.根据权利要求1所述的计算机实现的方法，其中在对应的所述深度范围内的所述可能的深度值中的每个可能的深度值处使用所述配置设置中的每个配置设置来评估所述图像分块中的每个图像分块包括：

标识与所述可能的深度值中的每个可能的深度值和所述配置设置对应的模糊核心；

对于每个模糊核心，通过利用所述模糊核心模糊全景对焦图像的全景对焦图像分块来确定仿真图像分块，所述仿真图像分块与所述现有图像的所述图像分块对应；以及

针对所述配置设置中的每个配置设置，通过以下操作基于所述仿真图像分块来确定用于所述图像分块的深度精度的所述可能的增加量：

确定在用于与相邻的可能的深度值对应的每对仿真图像分块的分块外观之间的距离的测量；以及

对所述距离的测量求和，其中所述距离的测量的和与用于所述图像分块的深度精度的所述可能的增加量对应。

5.根据权利要求1所述的计算机实现的方法，其中用于每个图像分块的深度精度的所述可能的增加量被用于生成投票图，所述投票图解释在所述现有的深度图中被表示的每个像素处所述配置设置与深度精度的所述可能的增加量的对应关系，并且其中生成所述深度细化图像捕获指令基于所述投票图。

6.根据权利要求1所述的计算机实现的方法，还包括：

根据所述深度细化图像捕获指令捕获所述至少一个下一图像；以及

至少使用所述至少一个下一图像来生成细化的深度图，并且其中所述细化的深度图包括至少一个深度估计，所述至少一个深度估计比所述现有的深度图中的所述至少一个深度估计更精确。

7.根据权利要求1所述的计算机实现的方法，还包括：接收输入，所述输入包括用于所述现有的深度图的深度精度的可能的最小增加量、要捕获的附加图像的总量、以及用于捕获附加图像的总时间量中的至少一项，并且其中根据所述输入来执行生成所述深度细化图像捕获指令。