[发明专利]具有IP保护的可重构神经网络训练及使用方法有效
| 申请号: | 202110499887.3 | 申请日: | 2021-05-08 |
| 公开(公告)号: | CN113361682B | 公开(公告)日: | 2022-08-16 |
| 发明(设计)人: | 高艳松;邱虎鸣;李群 | 申请(专利权)人: | 南京理工大学 |
| 主分类号: | G06N3/04 | 分类号: | G06N3/04;G06N3/063;G06N3/08;G06N5/04 |
| 代理公司: | 南京理工大学专利中心 32203 | 代理人: | 陈鹏 |
| 地址: | 210094 *** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 具有 ip 保护 可重构 神经网络 训练 使用方法 | ||
1.一种具有IP保护的可重构神经网络训练方法,其特征在于,包括步骤:
设定数据集、任务集{T1,T2,…,TM}和参数集,每个数据集对应一个任务Tm,m∈{1,…,M},不同的任务共享相同的参数集,参数集包括权重和偏置;
对数据集的数据预处理,初始化神经网络模型;
根据初始化的神经网络模型,以batch为单位喂入第m个数据集,m=1,开始训练;当训练任务Tm时,将模型根密钥设置为任务Tm对应的根密钥km,通过km将模型参数集重构到任务Tm对应的参数排列采用反向传播算法更新模型参数集;
交替数据集重复训练过程,直至m=M,得到具有IP保护的可重构神经网络模型。
2.根据权利要求1所述的可重构神经网络训练方法,其特征在于,所述神经网络模型为RBNN,所述根密钥km为可重构神经网络第一层随机发生器H的随机种子,生成对应的序列重新排列此层参数,通过递归函数来获得网络下一层密钥k′m并作为该层随机发生器H′的随机种子,生成对应的序列来重新排列此层参数,同时通过加密散列函数对k′m处理,使每一层的生成的序列去相关。
3.根据权利要求2所述的可重构神经网络训练方法,其特征在于,所述根密钥km=XOR(User_keym,PUF_key),其中,km表示对应任务Tm的根密钥,User_keym表示用户密钥,PUF_key表示PUF密钥。
4.根据权利要求2所述的可重构神经网络训练方法,其特征在于,所述通过km将模型参数集W重构到任务Tm对应的参数排列为:
其中,W表示RBNN参数集,表示任务Tm对应的参数排列。
5.根据权利要求2所述的可重构神经网络训练方法,其特征在于,所述参数排列用于不同任务之间的切换,任务切换表示为:
其中,WTi表示任务Ti对应的参数排列,表示任务Tj对应的参数排列,通过这种切换,将RBNN执行的任务,从任务Ti切换至任务Tj,1≤i,j≤M。
6.根据权利要求2所述的可重构神经网络训练方法,其特征在于,采用反向传播算法更新模型参数集包括:
根据任务Tm对应的RBNN参数排列前行传播计算任务Tm的预测值,并根据真实值,计算得到任务Tm的损失其损失函数为:
假设使用数据集Dm训练任务Tm,表示从数据集Dm开始的第i批样本,其中,表示样本数据,表示样本标签,表示任务Tm的损失值,表示将参数重构至时对任务Tm的预测值;
根据任务Tm的损失计算得到任务Tm对应参数排列的梯度,对应的梯度为:
其中,表示对应任务Tm的损失值,表示任务Tm对应的RBNN参数排列;
根据梯度通过反向传播算法更新RBNN的参数集W。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京理工大学,未经南京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110499887.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种耳迷走神经刺激仪控制电路
- 下一篇:基于BLISS的多学科协同优化方法





