[发明专利]光场相机2.0的渲染方法及电子设备

说明书

本发明实施例公开一种光场相机2.0的渲染方法及电子设备。所述方法包括：A1、基于微透镜阵列的参数信息，对光场图像进行校正，使得微透镜图像规则放置；A2、根据光场相机2.0的成像特性，获取每一个所述微透镜图像对应的拼接块尺寸；A3、按照对应的所述拼接块尺寸从每一个所述微透镜图像中提取微透镜图像块，根据所述微透镜阵列的几何排布方式将各个所述微透镜图像块进行拼接；A4、扩大所述微透镜图像块的尺寸，使相邻的所述微透镜图像块之间有交叠部分，对所述交叠部分进行融合，然后进行滤波以实现光场图像的渲染。所述电子设备的处理器可执行所述方法。本发明实施例可实现对光场相机2.0成像的高精度渲染，可提升渲染结果的成像质量。

技术领域

本发明涉及计算机视觉与数字图像处理技术领域，特别涉及光场相机2.0的一种高精度渲染方法。

背景技术

光场相机2.0为第二代光场相机。光场相机不同于传统相机的最大之处在于其结构中加入了微透镜阵列，因而使得传感器上能够记录更多的有效信息，包括场景的方向信息和位置信息等。正是由于这种结构，使光场相机具有许多特殊的本领，如拍照后重新聚焦、转换视角、获取深度信息等。由于光场相机具有能够同时捕获光线的位置与方向信息的特点，使得其在虚拟现实、全息技术、三维重建等方面受到广泛的关注。由于其独特的光学构造和成像过程，因此需要对应的渲染方法实现对光场图像的高精度渲染。

通常的光场相机2.0的渲染方法仅仅利用了微透镜的结构上的特点，提取对应的微透镜图像块进行拼接，这往往会造成很大的块效应，从而使得最终的成像效果较差，不能够满足人们对光场数据的需求。

以上背景技术内容的公开仅用于辅助理解本发明的发明构思及技术方案，其并不必然属于本发明的现有技术，在没有明确的证据表明上述内容在本发明的申请日已经公开的情况下，上述背景技术不应当用于评价本发明的新颖性和创造性。

发明内容

本发明提出一种光场相机2.0的渲染方法及电子设备，能够实现准确获取光场图像块尺寸，并通过采用更加自然的融合方式，消除渲染结果的块效应，可提升渲染结果的成像质量。

在第一方面，本发明提供一种光场相机2.0的渲染方法，包括：A1、基于微透镜阵列的参数信息，对光场图像进行校正，使得微透镜图像规则放置，以进行后续处理；A2、根据光场相机2.0的成像特性，获取每一个所述微透镜图像对应的拼接块尺寸；A3、按照对应的所述拼接块尺寸从每一个所述微透镜图像中提取微透镜图像块，根据所述微透镜阵列的几何排布方式将各个所述微透镜图像块进行拼接；A4、扩大所述微透镜图像块的尺寸，使相邻的所述微透镜图像块之间有交叠部分，对所述交叠部分进行融合，然后进行滤波以实现光场图像的渲染。

在一些优选的实施方式中，所述A1具体包括：利用仿射变换，将所述光场图像校正为微透镜图像规则放置的图像并重新获取微透镜的中心点。

在一些优选的实施方式中，所述A2还包括：对所述微透镜图像进行上采样，以更加准确地获取所述拼接块尺寸。

在一些优选的实施方式中，所述A2具体包括：根据所述参数信息，对所述光场图像做仿射变换，得到仿射变换后的微透镜的中心点坐标，对相邻的微透镜计算结构相似性或求取相关，求出交叠区域的间隔，从而获取每一个所述微透镜图像对应的拼接块尺寸。

在一些优选的实施方式中，所述A3具体包括：以微透镜的中心点为中心按照相应的所述拼接块尺寸从每一个所述微透镜图像中提取微透镜图像块，根据所述微透镜阵列的排布方式以及结合所述微透镜阵列的中心点坐标对各个所述微透镜图像块进行拼接。

在一些优选的实施方式中，按照正方形或正六边形的排布方式进行拼接对各个所述微透镜图像块进行拼接。

在一些优选的实施方式中，所述A4中对所述交叠部分进行融合具体包括：采用灰度渐变的方式对所述交叠部分进行融合。

在一些优选的实施方式中，进行光场数据处理；所述光场数据处理包括重聚焦、视角转换和计算深度图。