[发明专利]用于多视图三维重建的信息处理方法及装置

说明书

本公开公开了一种用于多视图三维重建的信息处理方法及装置，其中方法包括：在获取到经语义识别后的参考图片、以及经语义识别后的与参考图片相关联的图片后，针对参考图片中的目标像素点，确定其对应的像素块；基于像素块对应的语义标签、以及相关联的图片的语义标签，在关联的图片中确定像素块对应的关联像素块；确定关联像素块中每一个像素点的取值。通过在确定像素块后，基于语义标签信息在关联图片中确定关联像素块，而后确定关联像素块中像素点的取值，提高了确定像素值的准确度，进而提高了基于MVS的重建效果，解决了相关技术中像素值确定准确度低，导致MVS重建效果不理想。

技术领域

本公开涉及图像处理技术领域，具体涉及到一种用于多视图三维重建的信息处理方法及装置。

背景技术

MVS——multi view system，MVS几乎对照片中的每个像素点都进行匹配，几乎重建每一个像素点的三维坐标，这样得到的点的密集程度可以较接近图像展示出的清晰度。

相关技术中，在MVS过程中对像素的打分准确度低，导致基于MVS三维重建后的效果差。

发明内容

本公开的主要目的在于提供一种用于多视图三维重建的信息处理方法及装置。

为了实现上述目的，根据本公开的第一方面，提供了一种用于多视图三维重建的信息处理方法，包括：在获取到经语义识别后的参考图片、以及经语义识别后的与参考图片相关联的图片后，针对参考图片中的目标像素点，确定其对应的像素块；基于所述像素块对应的语义标签、以及所述相关联的图片的语义标签，在所述关联的图片中确定所述像素块对应的关联像素块；确定所述关联像素块中每一个像素点的取值。

可选地，基于所述像素块对应的语义标签、以及所述相关联的图片的语义标签，在所述关联的图片中确定所述像素块对应的关联像素块包括：针对像素块中的每一个像素点，在所述相关联的图片中确定该像素点的关联像素点；基于每一个关联像素点的位置，确定与像素块对应的初始关联像素块；基于所述像素块中像素点对应的语义标签、以及初始关联像素块对应的语义标签，在初始关联像素块中确定像素块对应的关联像素块。

可选地，基于每一个关联像素点的位置，确定与像素块对应的初始关联像素块包括：基于每一个关联像素点的位置，确定每一个关联像素点对应的邻域像素，其中，邻域像素中包含预设数量的邻域像素点；将所有关联像素点对应的所有邻域像素确定为初始关联像素块。

可选地，基于所述像素块对应的语义标签、以及初始关联像素块对应的语义标签，在初始关联像素块中确定像素块对应的关联像素块包括：过滤掉邻域像素中语义标签与像素点的语义标签不符的邻域像素点，得到每一个关联像素点对应的目标邻域像素，其中，所有关联像素点对应的目标邻域像素构成关联像素块。

可选地，确定所述关联像素块中每一个像素点的取值包括：基于目标邻域像素中的像素点的像素值，利用预设的计算策略，计算得到对应的关联像素点的像素值。

根据本公开的第二方面，提供了一种用于多视图三维重建的信息处理装置，包括：像素块确定单元，被配置成在获取到经语义识别后的参考图片、以及经语义识别后的与参考图片相关联的图片后，针对参考图片中的目标像素点，确定其对应的像素块；关联像素块确定单元，被配置成基于所述像素块对应的语义标签、以及所述相关联的图片的语义标签，在所述关联的图片中确定所述像素块对应的关联像素块；像素值确定单元，被配置成确定所述关联像素块中每一个像素点的取值。

可选地，基于所述像素块对应的语义标签、以及所述相关联的图片的语义标签，在所述关联的图片中确定所述像素块对应的关联像素块进一步被配置成：针对像素块中的每一个像素点，在所述相关联的图片中确定该像素点的关联像素点；基于每一个关联像素点的位置，确定与像素块对应的初始关联像素块；基于所述像素块中像素点对应的语义标签、以及初始关联像素块对应的语义标签，在初始关联像素块中确定像素块对应的关联像素块。