[发明专利]跨域图像转换

说明书

根据本公开的实现，提出了一种跨域图像转换方案。在该方案中，基于第一图像域中的第一图像和第二图像域中的第二图像来确定用于从第一图像域到第二图像域的几何变形的第一学习网络，第一图像域和所述第二图像域的图像具有不同的风格并且其中的对象相对彼此具有几何变形。对第二图像执行从第二到第一图像域的几何变形以生成中间图像，或对第一图像执行从第一到第二图像域的几何变形以生成中间图像。基于第一图像和从第二图像生成的中间图像或基于第二图像和从第一图像生成的中间图像，确定用于从第一图像域到第二图像域的风格变换的第二学习网络。通过该方案，用于跨域图像转换的学习网络的处理准确度能够提高并且复杂度降低。

背景技术

图像转换指的是将一幅源图像转换为具有不同风格的图像。不同图像类型可以被认为是不同图像域。例如，照片、漫画、油画、漫画、素描、水彩画等可以被认为是不同的图像域。不同图像域中的图片的风格和/或几何变形呈现通常是不同的。

当前有很多图像转换技术能够实现跨域图像转换。然而，大多数图像转换技术专注于将源图像的风格变换期望的其他风格，但保留图像中呈现的内容基本保持不变。例如，可以将照片转换为素描风格的图像，但图像中的对象形状基本保持不变。在一些情况中，如果期望将源图像变换到具有不同几何形状呈现的目标图像，例如将展现真实人物的照片转换为具有夸张变形风格的漫画图像或者反之，仅仅转换照片的风格将不足以呈现漫画的效果。

发明内容

根据本公开的实现，提出了一种用于跨域图像转换方案。在该方案中，基于第一图像域中的第一图像和第二图像域中的第二图像来确定用于从第一图像域到第二图像域的几何变形的第一学习网络，第一图像域和所述第二图像域的图像具有不同的风格并且其中的对象相对彼此具有几何变形。对第二图像执行从第二图像域到第一图像域的几何变形以生成保持与第二图像相同风格的中间图像，或者对第一图像执行从第一图像域到第二图像域的几何变形以生成保持与第一图像相同风格的中间图像。基于第一图像和从第二图像生成的中间图像或者基于第二图像和从第一图像生成的中间图像，来确定用于从第一图像域到第二图像域的风格变换的第二学习网络。通过该方案，用于跨域图像转换的学习网络的处理准确度能够提高并且复杂度降低。

提供发明内容部分是为了简化的形式来介绍对概念的选择，其在下文的具体实施方式中将被进一步描述。发明内容部分无意标识要求保护的主题的关键特征或主要特征，也无意限制要求保护的主题的范围。

附图说明

图1示出了能够实施本公开的多个实现的计算环境的框图；

图2A示出了根据本公开的一个实现的图像转换模块的框图；

图2B示出了根据本公开的另一个实现的图像转换模块的框图；

图3示出了根据本公开的一个实现的用于训练第一学习网络的训练架构的框图；

图4A示出了根据本公开的一个实现的用于训练第二学习网络的训练架构的框图；

图4B示出了根据本公开的另一个实现的用于训练第二学习网络的训练架构的框图；

图5A示出了根据本公开的一个实现的用于跨越的图像转换的过程的流程图；

图5B示出了根据本公开的另一个实现的用于跨越的图像转换的过程的流程图；

图6A示出了根据本公开的一个实现的用于训练学习网络的过程的流程图；以及

图6B示出了根据本公开的另一个实现的用于训练学习网络的过程的流程图。

这些附图中，相同或相似参考符号用于表示相同或相似元素。

具体实施方式

现在将参照若干示例实现来论述本公开。应当理解，论述了这些实现仅是为了使得本领域普通技术人员能够更好地理解且因此实现本公开，而不是暗示对本公开的范围的任何限制。