[发明专利]使用多相机和深度相机阵列的基于图像的图像渲染方法和系统

权利要求书

1.一种渲染新图像的方法，包括：

使用图像相机获取图像组，

使用深度相机获取深度图像组，

根据所述深度图像组生成场景几何呈现，

通过使用所述场景几何呈现渲染所述图像组，生成符合新型相机的视角的重建图像，其中，所述新型相机也称为位于任意位置或用户定义的位置的虚拟相机；

其中，所述场景几何呈现被用于确定要用于最终图像的光线，用于所述最终图像的光线被确定为相对于共同位置与所述新型相机的光线具有相似深度的光线；

其中，所述新型相机的光线的深度从接近所述新型相机的深度相机针对该深度的相交光线获取，相对于共同平面不具有相同深度的光线被剔除，相对于共同平面具有相同深度的光线被保留用于插值最终图像，

在所述相交光线中不存在相对于共同平面具有相同深度的光线的情况下，保留具有最大深度的光线或查看相邻光线并进行混叠；

其中，所述相交光线中每条光线的深度是根据该光线对应的深度相机的深度图像计算的。

2.根据权利要求1所述的渲染新图像的方法，其中，所述场景几何呈现是从点云导出的。

3.根据权利要求2所述的渲染新图像的方法，其中，所述点云是从所述深度相机的深度图像中导出的。

4.根据权利要求2所述的渲染新图像的方法，其中，所述新型相机是深度相机。

5.根据权利要求2所述的渲染新图像的方法，其中，所述新型相机是图像加深度相机的混合体。

6.根据权利要求1所述的渲染新图像的方法，其中，所述方法还包括：

利用所述图像相机校准所述深度相机。

7.根据权利要求6所述的渲染新图像的方法，其中，所述校准使用深度可识别的对象。

8.根据权利要求6所述的渲染新图像的方法，其中，所述校准使用已知对象。

9.根据权利要求6所述的渲染新图像的方法，其中，所述校准使用多个相机可见的对象。

10.一种用于创建图像渲染的系统，包括：

一个或多个相机的结构；

计算场景几何并渲染图像的处理器；和

存储输入数据的存储介质；

其中，所述场景几何呈现被用于确定要用于最终图像的光线，用于所述最终图像的光线被确定为相对于共同位置与新型相机的光线具有相似深度的光线，其中，所述新型相机也称为位于任意位置或用户定义的位置的虚拟相机；

其中，所述新型相机的光线的深度从接近所述新型相机的深度相机针对该深度的相交光线获取，相对于共同平面不具有相同深度的光线被剔除，相对于共同平面具有相同深度的光线被保留用于插值最终图像，

在所述相交光线中不存在相对于共同平面具有相同深度的光线的情况下，保留具有最大深度的光线或查看相邻光线并进行混叠；

其中，所述相交光线中每条光线的深度是根据该光线对应的深度相机的深度图像计算的。

11.根据权利要求10所述的用于创建图像渲染的系统，其中，所述一个或多个相机包括深度相机和图像相机。