[发明专利]基于场景分割的风景图像处理方法、装置及计算设备

说明书

本发明公开了一种基于场景分割的风景图像处理方法、装置、计算设备及计算机存储介质，该方法包括：获取待处理风景图像；将待处理风景图像输入至场景分割网络中，得到与待处理风景图像对应的场景分割结果；根据与待处理风景图像对应的场景分割结果，确定特定对象的轮廓信息；依据特定对象的轮廓信息，为特定对象添加美化效果，得到处理后的风景图像。该技术方案能够快速、准确地得到风景图像对应的场景分割结果，基于场景分割结果能够更为精准地对风景图像中的天空、草地等风景添加美化效果，提高了图片显示效果。

技术领域

本发明涉及图像处理技术领域，具体涉及一种基于场景分割的风景图像处理方法、装置、计算设备及计算机存储介质。

背景技术

在现有技术中，图像场景分割处理方法主要是基于深度学习中的全卷积神经网络，这些处理方法利用迁移学习的思想，将在大规模分类数据集上经过预训练得到的网络迁移到图像分割数据集上进行训练，从而得到用于场景分割的分割网络，然后利用该分割网络对图像进行场景分割。

现有技术中得到的分割网络所使用的网络架构直接利用了图像分类网络，其卷积层中卷积块的大小是固定不变的，从而感受野的大小是固定不变的，其中，感受野是指输出特征图某个节点的响应对应的输入图像的区域，大小固定的感受野只适于捕捉固定大小和尺度的目标。然而对于图像场景分割，场景中经常会包含不同大小的目标，利用具有大小固定的感受野的分割网络在处理过大和过小的目标时常常会发生问题，例如，对于较小的目标，感受野会捕捉过多的目标周围的背景，从而将目标与背景混淆，导致目标遗漏并被错判为背景；对于较大的目标，感受野仅仅能捕捉目标的一部分，使得目标类别判断出现偏差，导致不连续的分割结果。因此，现有技术中的图像场景分割处理方式存在着图像场景分割的准确率低下的问题，那么利用所得到的分割结果也无法很好地对风景图像中的天空、草地等风景添加处理效果，所得到的处理后的风景图像的显示效果较差。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的基于场景分割的风景图像处理方法、装置、计算设备及计算机存储介质。

根据本发明的一个方面，提供了一种基于场景分割的风景图像处理方法，该方法基于经过训练的场景分割网络而执行，该方法包括：

获取待处理风景图像；其中，待处理风景图像中包含有特定对象；

将待处理风景图像输入至场景分割网络中，其中，在场景分割网络中至少一层卷积层，利用尺度回归层输出的尺度系数对该卷积层的第一卷积块进行缩放处理，得到第二卷积块，而后利用第二卷积块进行该卷积层的卷积运算，获得该卷积层的输出结果；尺度回归层为场景分割网络的中间卷积层；

得到与待处理风景图像对应的场景分割结果；

根据与待处理风景图像对应的场景分割结果，确定特定对象的轮廓信息；

依据特定对象的轮廓信息，为特定对象添加美化效果，得到处理后的风景图像。

进一步地，利用第二卷积块进行该卷积层的卷积运算，获得该卷积层的输出结果进一步包括：

利用线性插值方法，从第二卷积块中采样得到特征向量，组成第三卷积块；

依据第三卷积块与该卷积层的卷积核进行卷积运算，获得该卷积层的输出结果。

进一步地，场景分割网络训练所用的样本包含：样本库存储的多个样本图像以及与样本图像对应的标注场景分割结果。

进一步地，场景分割网络的训练过程通过多次迭代完成；在一次迭代过程中，从样本库中提取样本图像以及与样本图像对应的标注场景分割结果，利用样本图像和标注场景分割结果实现场景分割网络的训练。

进一步地，场景分割网络的训练过程通过多次迭代完成；其中一次迭代过程包括：