[发明专利]数据处理方法、装置、设备及计算机可读存储介质在审

专利信息
申请号: 202010680761.1 申请日: 2020-07-15
公开(公告)号: CN111967573A 公开(公告)日: 2020-11-20
发明(设计)人: 陈世峰;张志伟 申请(专利权)人: 中国科学院深圳先进技术研究院
主分类号: G06N3/04 分类号: G06N3/04;G06N3/08;G06N20/10
代理公司: 深圳中一联合知识产权代理有限公司 44414 代理人: 张全文
地址: 518000 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据处理 方法 装置 设备 计算机 可读 存储 介质
【权利要求书】:

1.一种数据处理方法,其特征在于,所述数据处理方法包括:

获取待训练的学生生成对抗网络,以及获取教师生成对抗网络;

固定所述教师生成对抗网络的参数,根据固定参数的教师生成对抗网络,指导所述学生生成对抗网络进行学习;

根据教师生成对抗网络的损失函数,以及教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对学习后的学生生成对抗网络进行训练,得到训练后的学生生成对抗网络;

根据训练后的学生生成对抗网络处理待处理数据。

2.根据权利要求1所述的数据处理方法,其特征在于,所述根据固定参数的教师生成对抗网络,指导所述学生生成对抗网络进行学习,包括:

通过最小化学生生成对抗网络的损失函数,以及最小化蒸馏损失,对所述学生生成对抗网络进行学习,其中,所述蒸馏损失为教师生成网络通过知识蒸馏得到学生生成对抗网络时所产生的损失。

3.根据权利要求2所述的数据处理方法,其特征在于,在对所述学生生成对抗网络进行学习之前,所述方法还包括:

通过学生生成对抗网络和教师生成对抗网络的中间层的潜在向量之间的距离,以及学生生成对抗网络和教师生成对抗网络的重建图像之间的距离,确定所述蒸馏损失。

4.根据权利要求3所述的数据处理方法,其特征在于,所述通过学生生成对抗网络和教师生成对抗网络的中间层的潜在向量之间的距离,以及学生生成对抗网络和教师生成对抗网络的重建图像之间的距离,确定所述蒸馏损失,包括:

分别获取学生生成对抗网络和教师生成对抗网络的中间层的第一潜在向量和第二潜在向量,以及获取分别获取学生生成对抗网络和教师生成对抗网络的重建图像;

获取所述第一潜在向量之间的L2距离的第一距离值,以及第二潜在向量之间的L2距离的第二距离值;

根据所述重建图像之间的距离,确定重建图像之间的L1距离的第三距离值;

根据第一距离值、第二距离值、第三距离值及预设的权重系数,确定所述蒸馏损失。

5.根据权利要求1所述的数据处理方法,其特征在于,所述根据教师生成对抗网络的损失函数,以及教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对学习后的学生生成对抗网络进行训练,包括:

通过教师生成对抗网络的损失函数训练教师生成对抗网络;

通过训练后的教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对所述学生生成对抗网络进行训练。

6.根据权利要求1所述的数据处理方法,其特征在于,所述根据教师生成对抗网络的损失函数,以及教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对学习后的学生生成对抗网络进行训练,包括:

通过教师生成对抗网络的损失函数训练教师生成对抗网络;

通过学生生成对抗网络的损失函数训练学生生成对抗网络;

通过训练后的教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对所述学生生成对抗网络进行训练。

7.根据权利要求1-6任一项所述的数据处理方法,其特征在于,在对学习后的学生生成对抗网络进行训练之后,所述方法还包括:

固定所述教师生成对抗网络的参数,根据固定参数的教师生成对抗网络,指导所述学生生成对抗网络进行再次学习;

根据再次学习后的教师生成对抗网络的损失函数,以及再次学习后的教师生成对抗网络与学生生成对抗网络之间的蒸馏损失,对学习后的学生生成对抗网络进行训练,直到训练后的学生生成对抗网络的性能满足预设的性能要求。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院,未经中国科学院深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010680761.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top