[发明专利]生成器的训练方法及装置、存储介质和电子装置在审
| 申请号: | 202110640176.3 | 申请日: | 2021-06-08 |
| 公开(公告)号: | CN113822976A | 公开(公告)日: | 2021-12-21 |
| 发明(设计)人: | 赵胜伟;黄迎松;白琨 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
| 主分类号: | G06T15/00 | 分类号: | G06T15/00;G06T15/02;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 赵静 |
| 地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 生成器 训练 方法 装置 存储 介质 电子 | ||
本发明公开了一种生成器的训练方法及装置、存储介质和电子装置,可应用于图像处理领域。包括:使用上一轮训练得到的风格图像生成器将第一真实图像转换成第二风格图像,使用上一轮训练得到的真实图像生成器将第二风格图像转换成第三真实图像;使用上一轮训练得到的真实图像生成器将第一风格图像转换成第二真实图像,并通过上一轮训练得到的风格图像生成器将所述第二真实图像转换成第三风格图像;确定预设的对抗损失函数在本轮训练时的取值;根据对抗损失函数在本轮训练时的取值,对上一轮训练得到的风格图像生成器和上一轮训练得到的真实图像生成器中的参数进行本轮训练的调整。本发明解决了图像风格化的准确率较低的技术问题。
技术领域
本发明涉及计算机领域,具体而言,涉及一种生成器的训练方法及装置、存储介质和电子装置。
背景技术
相关技术中,图像风格化可应用在娱乐、社交、内容创作等应用场景。图像风格化是目前数据图像处理的一个研究热点。
现有的传统图像翻译方法,使用真实图像和风格化的图像对神经网络模型进行训练,得到图像风格化模型。训练完成后可以将输入的真实图像进行风格化,得到渲染后的图像。但是目前的神经网络模型需要使用成对的真实图像和风格化图像进行训练。
以将人物卡通化为例,现有技术中需要使用同一个人物的真实图像和卡通画图像对神经网络模型进行训练。而在实际应用中,真实人像获取难度较低,而制作对应的卡通人像成本很高,无法对数据集中的每个真实人像一一制作卡通人像。而少量的训练数据导致模型的准确率较低,这限制了传统图像翻译方法在卡通渲染任务上的应用。
针对相关技术中,图像风格化的准确率较低的问题,目前尚未存在有效的解决方案。
发明内容
本发明实施例提供了一种生成器的训练方法及装置、存储介质和电子装置,以至少解决图像风格化的准确率较低的技术问题。
根据本发明实施例的一个方面,提供了一种生成器的训练方法,包括:使用上一轮训练得到的风格图像生成器将第一真实图像转换成第二风格图像,并使用上一轮训练得到的真实图像生成器将所述第二风格图像转换成第三真实图像;使用所述上一轮训练得到的真实图像生成器将第一风格图像转换成第二真实图像,并通过所述上一轮训练得到的风格图像生成器将所述第二真实图像转换成第三风格图像;通过所述第一真实图像和所述第一风格图像、所述第二真实图像和所述第二风格图像,以及所述第三真实图像和所述第三风格图像,确定预设的对抗损失函数在本轮训练时的取值;根据所述对抗损失函数在本轮训练时的取值,对所述上一轮训练得到的风格图像生成器和所述上一轮训练得到的真实图像生成器中的参数进行本轮训练的调整,以获取所述本轮训练得到的风格图像生成器和所述本轮训练得到的真实图像生成器,其中,所述风格图像生成器被设置为经过多轮训练后成为目标风格图像生成器,所述目标风格图像生成器用于将输入的真实图像转换为风格图像。
根据本发明实施例的另一个方面,提供了一种生成器的训练方法,包括:获取终端设备对目标对象进行拍摄所得到的目标真实图像;将所述目标真实图像输入目标风格图像生成器,得到所述目标真实图像转换成的目标风格图像,其中,所述目标风格图像生成器是对风格图像生成器经过多轮训练后得到的,所述对所述风格图像生成器经过多轮训练包括:使用上一轮训练得到的风格图像生成器将第一真实图像转换成第二风格图像,并使用上一轮训练得到的真实图像生成器将所述第二风格图像转换成第三真实图像;使用所述上一轮训练得到的真实图像生成器将第一风格图像转换成第二真实图像,并通过所述上一轮训练得到的风格图像生成器将所述第二真实图像转换成第三风格图像;通过所述第一真实图像和所述第一风格图像、所述第二真实图像和所述第二风格图像,以及所述第三真实图像和所述第三风格图像,确定预设的对抗损失函数在本轮训练时的取值;根据所述对抗损失函数在本轮训练时的取值,对所述上一轮训练得到的风格图像生成器和所述上一轮训练得到的真实图像生成器中的参数进行本轮训练的调整,以获取所述本轮训练得到的风格图像生成器和所述本轮训练得到的真实图像生成器;显示所述目标风格图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110640176.3/2.html,转载请声明来源钻瓜专利网。





