[发明专利]图像填充方法、装置、设备及存储介质

说明书

本申请实施例公开了一种图像填充方法、装置、设备及存储介质，涉及人工智能、深度学习、计算机视觉、图像填充技术领域，图像填充方法包括：获取待填充图像的横向纹理特征，待填充图像包括缺失区域；获取待填充图像的纵向纹理特征；将横向纹理特征和纵向纹理特征进行融合，获得融合纹理特征；基于待填充图像的场景信息，得到待填充图像的场景特征；将融合纹理特征与场景特征进行特征组合处理，得到组合特征；基于组合后的特征重建图像，其中重建的图像中不存在缺失区域。利用本申请能够实现高质量的图像填充。

技术领域

本申请涉及人工智能、深度学习、计算机视觉、图像填充技术领域，具体地，涉及一种图像填充方法、装置、设备以及存储介质。

背景技术

图像填充技术有广泛的应用场景，例如图像编辑、图像修复、移除图像中的特定物体，等等。现有图像填充技术大多基于块匹配或纹理匹配的方法，使用普通的卷积神经网络处理，存在填充效果不够真实，纹理不自然，人工瑕疵明显，效率低下等问题。

发明内容

本申请提供了一种图像填充方法、装置、设备以及存储介质。

根据本申请的第一方面，提供了一种图像填充方法，包括：

获取待填充图像的横向纹理特征，待填充图像包括缺失区域；

获取待填充图像的纵向纹理特征；

将横向纹理特征和纵向纹理特征进行融合，获得融合纹理特征；

基于待填充图像的场景信息，得到待填充图像的场景特征；

将融合纹理特征与场景特征进行特征组合处理，得到组合特征；

基于组合后的特征重建图像，其中重建的图像中不存在缺失区域。

根据本申请的第二方面，提供了一种图像填充装置，包括：

横向卷积模块，用于获取待填充图像的横向纹理特征，横向卷积模块的卷积核的宽度大于高度，待填充图像包括缺失区域；

纵向卷积模块，用于获取待填充图像的纵向纹理特征，纵向卷积模块的卷积核的宽度小于高度；

融合卷积模块，用于将横向纹理特征和纵向纹理特征进行融合，获得融合纹理特征；

场景卷积模块，用于基于待填充图像的场景信息，得到待填充图像的场景特征；

特征组合模块，用于将融合纹理特征与场景特征进行特征组合处理，得到组合特征；

像素重建模块，用于基于组合后的特征重建图像，其中重建的图像中不存在缺失区域。

根据本申请的第三方面，提供了一种电子设备，包括：

至少一个处理器；以及

与至少一个处理器通信连接的存储器；其中，

存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行如上所述的方法。

根据本申请的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，计算机指令用于使计算机执行如上所述的方法。

根据本申请的第五方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现如上所述的方法。

本申请实施例基于从待填充图像中提取的组合特征重建图像，组合特征中融合了待填充图像的横向纹理特征、纵向纹理特征以及场景特征，这些特征信息能够使重建的图像中原来缺失区域的对应位置与周围区域过渡自然，令填充效果更加生动。