[发明专利]图像转换网络获取方法、装置、计算设备及存储介质有效
申请号: | 201710574583.2 | 申请日: | 2017-07-14 |
公开(公告)号: | CN107516290B | 公开(公告)日: | 2021-03-19 |
发明(设计)人: | 申发龙;颜水成;曾钢;程斌 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06N3/08 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 转换 网络 获取 方法 装置 计算 设备 存储 介质 | ||
1.一种图像转换网络获取方法,所述方法基于经过训练的第一网络而执行,所述方法包括:
获取第一图像和第二图像,其中,第一图像和第二图像是具有不同风格的两张风格图像;
将所述第一图像和所述第二图像分别输入至所述第一网络中,并根据预设融合权值,在所述第一网络的加权运算层进行加权运算,得到与所述第一图像和所述第二图像的融合后的风格对应的第二网络;
其中,所述第一网络的训练步骤包括:从风格图像库中提取一个第一样本图像,从内容图像库中提取至少一个第二样本图像;将所述第一样本图像输入至第一网络中,得到与所述第一样本图像的风格对应的第三网络;利用与所述第一样本图像的风格对应的第三网络,分别针对至少一个第二样本图像生成对应的第三样本图像;根据至少一个第三样本图像与所述第一样本图像之间的风格损失以及至少一个第三样本图像与对应的第二样本图像之间的内容损失,得到第一网络损失函数,根据所述第一网络损失函数更新所述第一网络的权重参数;
迭代执行所述第一网络的训练步骤,直至满足预定收敛条件,其中,迭代执行所述第一网络的训练步骤包括:在多次迭代过程中,固定提取一个第一样本图像,替换地提取至少一个第二样本图像;当内容图像库中的第二样本图像提取完毕后,替换下一个第一样本图像,再替换地提取至少一个第二样本图像。
2.根据权利要求1所述的方法,其中,所述将所述第一图像和所述第二图像分别输入至所述第一网络中,并根据预设融合权值,在所述第一网络的加权运算层进行加权运算,得到与所述第一图像和所述第二图像的融合后的风格对应的第二网络进一步包括:
将所述第一图像输入至所述第一网络中,在所述第一网络中进行一次前向传播运算,确定所述第一图像对应的加权运算层数据;
将所述第二图像输入至所述第一网络中,在所述第一网络中进行一次前向传播运算,确定所述第二图像对应的加权运算层数据;
根据预设融合权值,在所述第一网络的加权运算层中对所述第一图像对应的加权运算层数据和所述第二图像对应的加权运算层数据进行加权运算,得到与所述第一图像和所述第二图像的融合后的风格对应的第二网络。
3.根据权利要求1所述的方法,其中,所述加权运算层为瓶颈层;所述瓶颈层为所述第一网络的卷积层中具有最小的向量维数的层次。
4.根据权利要求2所述的方法,其中,所述加权运算层数据为向量数据。
5.根据权利要求1所述的方法,其中,第一网络训练所用的样本图像包含:风格图像库存储的多个第一样本图像和内容图像库存储的多个第二样本图像。
6.根据权利要求1所述的方法,其中,所述第一网络的训练过程通过多次迭代完成;其中一次迭代过程包括:
利用与第一样本图像的风格对应的第三网络,生成与第二样本图像对应的第三样本图像;
根据所述第三样本图像与所述第一样本图像之间的风格损失以及所述第三样本图像与所述第二样本图像之间的内容损失,得到第一网络损失函数,利用所述第一网络损失函数实现第一网络的训练。
7.根据权利要求1所述的方法,其中,所述预定收敛条件包括:迭代次数达到预设迭代次数;和/或,所述第一网络损失函数的输出值小于预设阈值;和/或,与所述第二样本图像对应的第三样本图像的视觉效果参数达到预设视觉效果参数。
8.根据权利要求1所述的方法,所述将所述第一样本图像输入至第一网络中,得到与所述第一样本图像的风格对应的第三网络进一步包括:
从所述第一样本图像中提取风格纹理特征;
将所述风格纹理特征输入至第一网络中,得到与所述风格纹理特征对应的第三网络。
9.根据权利要求1-8中任一项所述的方法,所述第一网络为对神经网络进行训练得到的元网络,所述第二网络为图像转换网络。
10.根据权利要求1-8中任一项所述的方法,所述第三网络为在所述第一网络的训练过程中得到的转换网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710574583.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电动公共自行车还车自动充电联接装置
- 下一篇:一种便于收纳的电源适配器
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序