[发明专利]从聚焦堆叠生成适合的切片图像的方法和装置

说明书

本公开涉及从聚焦堆叠生成适合的切片图像的方法和装置。一种利用源自重聚焦图像的聚焦堆叠的全对焦图像从该聚焦堆叠生成适合的切片图像的方法，该包括：在该聚焦堆叠中选择(S725)切片图像；在全对焦图像中选择(S730)要被聚焦在适合的切片图像中的至少一个对象；以及通过将在全对焦图像中选择的至少一个对象结合到所选的切片图像上来生成(S735)适合的切片图像。

技术领域

本公开通常涉及从图像的聚焦堆叠生成适合的切片图像的方法和装置。

背景技术

通过在主透镜和传感器之间布置微透镜阵列，全光相机能够测量沿穿过传感器的每个光束行进的光量。光场可以被后处理以从不同视角重构场景的图像。光场图像可以被用于生成包括具有不同深度的图像的聚焦堆叠。因此，用户可以改变这些图像的焦点。相比于传统相机，全光相机可以获得额外的光信息成分以通过后处理来从不同视角和深度实现对场景的图像的重构。

在全光类型1(例如，由Lytro公司提供的Lytro光场相机)中，微透镜阵列被放置在传感器前面。微透镜阵列中的所有微透镜具有相同的焦距并且微透镜阵列被放置于离传感器一个焦距的位置。这种配置使得能够获得最大的角度分辨率以及低的空间分辨率。

类似于透镜在其焦平面附近生成的光场，重组(例如，由全光相机、相机阵列捕获的，或者利用计算机成像(CGI)模拟的)光场图像或视频的数据集以在前透镜的焦平面附近形成光数据量。这样的聚焦堆叠在图1中被示意性示出。

相机的传统聚焦是通过选择聚焦堆叠中的图像中的一个图像来模拟的，相当于垂直于相机的主光轴来移动焦平面。相反地，光场相机提供从不同视角和不同聚焦浏览图片的能力。于是，光场相机的用户可以以不寻常的方式控制聚焦，例如，如图1所示，穿过聚焦堆叠的交叉平面可以被定义以在聚焦堆叠内提取切片图像。这种切片图像可以沿交叉平面提供“全对焦”图像。

J.P.Luke等人在数字多媒体广播国际期刊卷2010(International Journal ofDigital Multimedia Broadcasting Volume 2010)中提出的“使用图形处理单元对超分辨深度且全对焦的图像进行近实时估计(Near Real-Time Estimation of Super-ResolvedDepth and All-in-Focus Images from a Plenoptic Camera Using GraphicsProcessing Units)”提到可以利用光场图像生成聚焦堆叠并且提出从全光相机产生全对焦图像。

然而，在对象位于聚焦堆叠中的焦平面上的情况下，如果交叉平面如图2所示穿过该对象，那么对象的左端的前表面将处于交叉平面之后距离d1处，并且对象的右端的前表面将处于交叉平面之前距离d2处。由于在焦平面上的对象和交叉平面之间存在这些距离，因此在进行了对切片图像的重聚焦处理后，对象的两端在聚焦于切片图像的图像中都会模糊不清。

发明内容

根据本公开的一方面，一种利用源自重聚焦图像的聚焦堆叠的全对焦图像从该聚焦堆叠中生成适合的切片图像的装置，包括：处理器，该处理器被配置为：在聚焦堆叠中选择切片图像；在全对焦图像中选择要被聚焦在所述适合的切片图像中的至少一个对象；以及通过将在全对焦图像中所选的至少一个对象结合到所选的切片图像上来生成适合的切片图像。

根据本公开的另一方面，一种利用源自重聚焦图像的聚焦堆叠的全对焦图像从该聚焦堆叠中生成适合的切片图像的方法，其中在该全对焦图像中，对象对焦，该方法包括：在聚焦堆叠中选择切片图像；在全对焦图像中选择要被聚焦在所述适合的切片图像中的至少一个对象；以及通过将在全对焦图像中所选的至少一个对象结合到该所选的切片图像上来生成适合的切片图像。

根据本公开的另一方面，一种从通信网络可下载的和/或在计算机可读介质上存储的和/或处理器可执行的计算机程序产品，包括用于实施根据本公开的方法的程序代码指令。