[发明专利]动漫图像生成方法、装置、电子设备及存储介质

权利要求书

1.一种动漫图像生成方法，其特征在于，包括：

获取待转换的涂鸦作品，根据所述待转换的涂鸦作品生成所述待转换的涂鸦作品的特征图；

将所述待转换的涂鸦作品的特征图输入动漫图像生成模型，生成由所述待转换的涂鸦作品转换而来的动漫图像；其中，

所述动漫图像生成模型是基于涂鸦作品以及与所述涂鸦作品对应的动漫图像，通过对生成式对抗网络进行训练得到的；

所述动漫图像生成方法还包括：

采集多组动漫图像和涂鸦作品；同一组中的动漫图像和涂鸦作品具有对应关系；

根据所述多组动漫图像和涂鸦作品，通过对生成式对抗网络的训练得到动漫图像生成模型；

所述特征图包括边缘轮廓图；相应地，所述根据所述多组动漫图像和涂鸦作品，通过对生成式对抗网络的训练得到动漫图像生成模型包括：

构建生成式对抗网络，所述生成式对抗网络包括生成器和判别器；

根据所述动漫图像生成存在区域空缺的动漫图像；

根据与所述动漫图像对应的涂鸦作品生成涂鸦作品的边缘轮廓图；

根据对一组中的动漫图像、存在区域空缺的动漫图像和涂鸦作品的边缘轮廓图的处理，更新所述生成器和所述判别器的权重参数，完成所述生成式对抗网络的一次训练；计算当前次训练的损失，在损失收敛前，采用另一组中的动漫图像、存在区域空缺的动漫图像和涂鸦作品的边缘轮廓图继续所述生成式对抗网络的训练；

将训练最终得到的生成器作为动漫图像生成模型。

2.根据权利要求1所述的动漫图像生成方法，其特征在于，所述特征图包括边缘轮廓图和/或颜色分布图；其中，所述颜色分布图是对图像做中值滤波和平滑颜色域后得到的。

3.根据权利要求1所述的动漫图像生成方法，其特征在于，所述特征图包括边缘轮廓图和颜色分布图；相应地，所述根据所述多组动漫图像和涂鸦作品，通过对生成式对抗网络的训练得到动漫图像生成模型包括：

构建生成式对抗网络，所述生成式对抗网络包括生成器和判别器；

根据所述动漫图像生成存在区域空缺的动漫图像；

根据与所述动漫图像对应的涂鸦作品生成涂鸦作品的边缘轮廓图和涂鸦作品的颜色分布图；

根据对一组中的动漫图像、存在区域空缺的动漫图像和涂鸦作品的边缘轮廓图的处理，更新所述生成器和所述判别器的权重参数，完成所述生成式对抗网络的一次训练；计算当前次训练的损失，在损失收敛前，采用另一组中的动漫图像、存在区域空缺的动漫图像和涂鸦作品的边缘轮廓图继续所述生成式对抗网络的训练；得到经过第一轮训练的生成器和判别器；

基于第一轮训练得到的生成器和判别器，根据对一组中的动漫图像和涂鸦作品的边缘轮廓图、颜色分布图的处理，更新所述生成器和所述判别器的权重参数，完成所述生成式对抗网络的一次训练；计算当前次训练的损失，在损失收敛前，采用另一组中的动漫图像和涂鸦作品的边缘轮廓图、颜色分布图继续所述生成式对抗网络的训练；

将最终得到的生成器作为动漫图像生成模型。

4.根据权利要求3所述的动漫图像生成方法，其特征在于，所述计算当前次训练的损失包括：

计算生成图像的每个像素点的L1损失；

计算生成式对抗网络的对抗损失；

计算卷积过程中的特征损失；

将生成图像的每个像素点的L1损失、生成式对抗网络的对抗损失和卷积过程中的特征损失求和。

5.根据权利要求3所述的动漫图像生成方法，其特征在于，所述根据所述待转换的涂鸦作品生成所述待转换的涂鸦作品的颜色分布图包括：

对所述待转换的涂鸦作品做中值滤波，去除所述待转换的涂鸦作品中颜色部分的干扰噪声；

对经过中值滤波的待转换的涂鸦作品做平滑颜色域的处理；

对平滑颜色域后的待转换的涂鸦作品做中值滤波，得到待转换的涂鸦作品的颜色分布图。