[发明专利]一种基于目标优化的语义图像修复方法

摘要

本发明公开了一种基于目标优化的语义图像修复方法，该方法是以网络结构优化和修复过程优化为主要目标。在网络结构优化方面，通过移除Context‑Encoder中的通道连接层、添加并联空洞卷积层和设置符合人类感官层次的损失函数的方式，使整个网络在尽量捕获更多图像语义特征的同时保留其空间关系。在修复过程优化方面，通过图像语义分割网络捕获待修复图像中的特定目标，在利用泛化模型对整张图像进行修复的同时可以针对捕获到的目标进行修复优化操作，从而使修复结果具备更高的可靠性和准确性。本发明既保留了图像的空间信息，也针对特定的目标进行修复优化，进而有效地解决了常规修复方法中存在的语义混乱问题。

主权项

1.一种基于目标优化的语义图像修复方法，其特征在于：该方法是以网络结构优化和修复过程优化为主要目标，在网络结构优化方面，通过移除Context‑Encoder中的通道连接层、添加并联空洞卷积层和设置符合人类感官层次的损失函数的方式，使整个网络在尽量捕获更多图像语义特征的同时保留其空间关系，在修复过程优化方面，通过图像语义分割网络捕获待修复图像中的特定目标，在利用泛化模型对整张图像进行修复的同时能够针对捕获到的目标进行修复优化操作，从而使修复结果具备更高的可靠性和准确性；其包括以下步骤：1)通过线性插值对输入图像和掩膜进行预处理，使所有图像满足网络输入要求；2)将输入图像与掩膜相结合，获得缺失图像；3)对缺失图像进行第一次修复操作，获取修复结果；4)利用语义分割网络对第一次修复结果进行修复，获取图像中的特定目标；5)分离图像中的特定目标，使用特定网络进行修复，获取第二次修复结果；6)将第一次修复结果和第二次修复结果在目标区域的位置进行融合，得到最终修复结果。