[发明专利]图像处理方法及装置、电子设备和存储介质

说明书

本公开涉及一种图像处理方法及装置、电子设备和存储介质，所述方法包括：获得第一全景图像；对第一全景图像进行全景估计处理，获得第二全景图像。根据本公开的实施例的图像处理方法，可将不完整的第一全景图像重构成为完整的第二全景图像，获得完整的光照信息，可用于对虚拟对象的逆向绘制。并且，无需使用其他设备，减少人工参与，提高光照信息的精度。

技术领域

本公开涉及计算机技术领域，尤其涉及一种图像处理方法及装置、电子设备和存储介质。

背景技术

从图像或视频中推断场景的光照信息在诸如增强现实等逆向绘制应用中具有关键作用，需要使用预测的光照信息来对插入的虚拟对象的进行绘制，并准确地表达该虚拟对象的亮度信息。

相关技术中，可分为借助辅助设备确定光照信息。例如，通过借助于放在场景中的一些已知几何或材质表面反射属性的球体，算法能够根据球表面信息和法线方向更方便地推测场景中的光照情况；或者借助一些特殊的设备，比如鱼眼相机，光场相机等拍摄设备，能够轻松捕获更大范围的光分布信息；又或者拍摄一系列不同曝光度的图像来快速得到高动态的场景光照信息，但借助辅助设备成本较高，且通常需要人工参与，精度较低。

发明内容

本公开提出了一种图像处理方法及装置、电子设备和存储介质。

根据本公开的一方面，提供了一种图像处理方法，包括：

获得第一全景图像，所述第一全景图像为预设尺寸的不完整的全景图像；

对所述第一全景图像进行全景估计处理，获得第二全景图像，其中，所述第二全景图像为所述预设尺寸的完整的全景图像。

根据本公开的实施例的图像处理方法，可将不完整的第一全景图像重构成为完整的第二全景图像，获得完整的光照信息，可用于对虚拟对象的逆向绘制。并且，无需使用其他设备，减少人工参与，提高光照信息的精度。

在一种可能的实现方式中，将所述第一全景图像进行全景估计处理，获得第二全景图像，包括：

将所述第一全景图像进行编码处理，获得隐空间图像；

将所述隐空间图像进行隐空间补全处理，获得隐空间全景图像；

将所述隐空间全景图像进行解码处理，获得所述第二全景图像。

通过这种方式，可对第一全景图像在隐空间中进行补全并解码，可准确地估计空白区域中的信息，获得完整的第二全景图像。

在一种可能的实现方式中，将所述第一全景图像进行编码处理，获得隐空间图像，包括：

将所述第一全景图像进行分割处理，获得多个第一图像块；

将包括有效像素点的第一图像块进行编码处理，获得所述隐空间图像。

在一种可能的实现方式中，获得第一全景图像，包括：

对多个第一图像进行融合处理，获得第一全景图像，其中，所述多个第一图像包括所述图像获取装置拍摄的目标场景的图像。

在一种可能的实现方式中，对多个第一图像进行融合处理，获得第一全景图像，包括：

分别对各所述第一图像进行特征点提取处理，获得各所述第一图像中的特征点；

根据所述第一图像中的特征点，对所述多个第一图像进行融合处理，获得所述第一全景图像。

通过这种方式，可通过特征点来识别和去除第一图像之间的冗余区域，获得准确的第一全景图像，提高对第一全景图像的处理效率。

在一种可能的实现方式中，所述方法还包括：

通过所述图像获取装置针对同一场景获取多个曝光时间的第二图像；