[发明专利]一种全景图像的处理方法及装置

说明书

本发明提供了一种全景图像的处理方法及装置，用以解决现有技术中通过360度全景摄像机获取的全景图像中存在拍摄者的问题。所述方法包括：确定包括至少两张待处理的全景图像的输入集合；待处理的全景图像中均包含目标对象；从输入集合中确定目标图像和与该目标图像对应的源图像；根据目标对象在目标图像中的相对位置，从源图像中提取该相对位置对应的图像，并利用提取得到的图像替换目标图像中的目标对象，以生成处理后的目标图像；根据处理后的目标图像，确定输出集合。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种全景图像的处理方法及装置。

背景技术

虚拟现实(Virtual Reality，VR)技术是一种可以创建和体验虚拟世界的计算机仿真系统，其中，虚拟现实中的虚拟场景主要通过头戴式显示设备中显示全景视频或全景图像来实现，从而实现用户与虚拟场景之间的交互。

其中，所谓的全景图像为水平360度，垂直180度即全视角360*180的图像。在观察全景图像时，观察者位于球的中心，通过移动鼠标、键盘或者头戴式显示设备，可以观察到任一角度的图像，从而使得观察者完全融入到全景图像所营造的虚拟场景中。

现阶段的用于营造虚拟场景的全景图像为，通过设置有多个不同朝向的镜头的360度全景摄像机拍摄得到的。一般情况下，拍摄者手持该摄像机，触动快门，再将不同朝向的镜头拍摄得到的图像进行拼接，得到最终的全景图像。但这种拍摄方式拼接得到的全景图像中必然存在有拍摄者，将给体验虚拟场景的用户带来困惑，特别是在观看全景视频时，在某一方位总会有拍摄者在虚拟场景中。

综上所述，如何得到不存在目标对象(如拍摄者)的全景图像，成为全景图像处理领域亟待解决的问题。

发明内容

本发明实施例提供了一种全景图像的处理方法及装置，用以解决现有技术中通过360度全景摄像机获取的全景图像中存在待去除的目标对象的问题。

本发明实施例提供的一种全景图像的处理方法，该方法包括：

确定包括至少两张待处理的全景图像的输入集合；其中，所述待处理的全景图像中均包含目标对象；

从所述输入集合中确定目标图像和与所述目标图像对应的源图像；

根据所述目标对象在所述目标图像中的相对位置，从所述源图像中提取所述相对位置对应的图像，并利用提取得到的图像替换所述目标图像中的目标对象，以生成处理后的全景图像；

根据处理后的全景图像，确定输出集合。

其中，在一个实施例中，在确定目标图像和与所述目标图像对应的源图像之前，该方法还包括：

检测所述待处理的全景图像中目标对象所处的区域。

其中，在一个实施例中，从所述输入集合中确定目标图像，包括：

根据用户触发的指令，从所述输入集合中选取该指令对应的全景图像为目标图像；

从所述输入集合中确定与所述目标图像对应的源图像，包括：

从所述输入集合中选取与所述目标图像中目标对象所处的区域不重叠，且与所述目标图像的背景区域的相似度满足相似度阈值的全景图像；并确定任一所述选取的全景图像为源图像；或者，

若所述输入集合中包括多个与所述目标图像中目标对象所处的区域不重叠，且与所述目标图像的背景区域的相似度满足相似度阈值的全景图像，则确定与所述目标图像的背景区域的相似度最高的全景图像为源图像，其中，所述背景区域为所述全景图像中目标对象所处的区域以外的其他区域。

其中，在一个实施例中，从所述输入集合中确定目标图像和与所述目标图像对应的源图像，包括：