[发明专利]一种用于混合图片的三维重建方法及系统

说明书

本发明实施例提供一种用于混合图片的三维重建方法及系统，该方法包括：通过训练后的神经网络模型对混合图片集中所有图片进行分类，获取待建模场景中每一目标对应的图片集，所述混合图片集中包括所述待建模场景不同角度的图片，且所述混合图片集包含多个目标场景的特征点；根据每一目标对应的图片集，对每一目标进行三维重建，以获得所述待建模场景的三维重建图像。本发明实施例由于混合图片中一般都包含有多个目标，所以现需要对混合图片进行分类，得到每一目标对应的图片集，再根据每一目标对应的图片集对该目标进行三维重建，从而获得待建模场景的三维重建图像，本发明实施例有助于目标三维重建的准确性和可扩展性。

技术领域

本发明实施例涉及三维建模技术领域，尤其涉及一种用于混合图片的三维重建方法及系统。

背景技术

三维重建在计算机视觉中是指由多幅二维图像恢复出物体三维结构的信息，实现物体的外部特征如形状、纹理等三维重建，是透视成像的逆过程。

目前基于计算机视觉的三维重建方法大致可以分为两类：立体视觉方法和运动恢复方法。无论是哪种方法，其本质上都是获得物体的第三个维度上面的信息，即为深度信息。平面信息能给出二维信息，通过一定的方式获取第三个维度的信息即可恢复物体的三维模型。

为了获得深度信息，一种方法是估测二维图像中每个像素点相对于相机的距离，即为深度图，然后基于得到的深度图对图像进行处理来创建第二视角。

另外一种方法则是通过多张图片直接合成。将多张图片中的特征点加以提取，并对其进行匹配；匹配之后就可以把图片中属于同一来源的点目标提取出来，实现图像的拼接和三维重建。其中将会涉及到模式识别等相关方面的问题，并且还需要根据这些特征反推算其空间位置信息，需要有效的算法支撑。但是它不需要其余的背景信息，因此需要的输入较为理想，但是实现过程较为复杂。

在以上两种方式中对图片集的要求较高，但是在实际中，很多图片集都是混合图片集，也就是说一个图片集中并不仅仅只有一个目标物的各角度照片，会混合着多种目标的不同角度图片。

因此，亟需一种针对混合图片的三维建模方法。

发明内容

本发明实施例提供一种用于混合图片的三维重建方法，该方法包括：

S1，通过训练后的神经网络模型对混合图片集中所有图片进行分类，获取待建模场景中每一目标对应的图片集，所述混合图片集中包括所述待建模场景不同角度的图片，且所述混合图片集包含多个目标场景的特征点；

S2，根据每一目标对应的图片集，对每一目标进行三维重建，以获得所述待建模场景的三维重建图像。

本发明实施例提供一种用于混合图片的三维重建系统，该系统包括：

分类模块，用于通过训练后的神经网络模型对混合图片集中所有图片进行分类，获取待建模场景中每一目标对应的图片集，所述混合图片集中包括所述待建模场景不同角度的图片；

重建模块，用于根据每一目标对应的图片集，对每一目标进行三维重建，以获得所述待建模场景的三维重建图像。

本发明实施例提供一种用于混合图片的三维重建设备，该设备包括：

至少一个处理器、至少一个存储器、通信接口和总线；其中，

所述处理器、存储器、通信接口通过所述总线完成相互间的通信；

所述通信接口用于该测试设备与显示装置的通信设备之间的信息传输；

所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行一种用于混合图片的三维重建方法。