[发明专利]一种小样本硬盘故障数据生成方法、存储介质及计算设备在审
| 申请号: | 202011290978.8 | 申请日: | 2020-11-17 |
| 公开(公告)号: | CN112434733A | 公开(公告)日: | 2021-03-02 |
| 发明(设计)人: | 董小社;王宇菲;王龙翔;王强;李博闻;陈维多;张兴军;伍卫国 | 申请(专利权)人: | 西安交通大学 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04;G06N3/08;G06F11/22 |
| 代理公司: | 西安通大专利代理有限责任公司 61200 | 代理人: | 高博 |
| 地址: | 710049 *** | 国省代码: | 陕西;61 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 样本 硬盘 故障 数据 生成 方法 存储 介质 计算 设备 | ||
1.一种小样本硬盘故障数据生成方法,其特征在于,包括以下步骤:
S1、基于长短期记忆网络作为生成对抗网络的生成网络,对硬盘SMART数据进行学习,对长短期记忆网络的梯度进行调整并生成用于对抗训练的虚拟硬盘故障数据;
S2、对步骤S1生成的虚拟硬盘故障数据进行甄别,将真实的硬盘故障数据作为训练样本数据集,训练样本数据集中70%的数据用于训练数据生成模型,训练样本数据集中30%的数据用于验证数据生成模型;交替计算生成对抗网络中生成网络G和判别网络D的梯度并调整至收敛,完成小样本硬盘故障数据训练,训练完成后,加载模型中的生成网络G,将初始随机向量传给生成网络G,生成网络G生成虚拟硬盘故障数据。
2.根据权利要求1所述的方法,其特征在于,步骤S1中,硬盘SMART数据按照对应的最大值进行标准化处理,范围为-1到1,硬盘SMART数据包括raw read error rate,spin uptime,reallocated sectors count,seek error rate,power on hours,reporteduncorrectable errors,high fly writes,temperature,hardware ECC recovered,current pending sector count,uncorrectable sector count。
3.根据权利要求1所述的方法,其特征在于,步骤S1中,对长短期记忆网络梯度进行调整具体为:
在LSTM网络一次完整的前向计算与反向传播过程中,计算网络的梯度Tg,并与实际的硬盘数据标签比较计算损失函数,采用Adam方法最小化损失函数;随后将初始随机向量传给LSTM网络,LSTM网络捕捉训练数据的分布特征并生成虚拟硬盘故障数据。
4.根据权利要求3所述的方法,其特征在于,用交叉熵损失函数计算生成网络G和判别网络D输出值的损失,网络梯度Tg为:
损失函数L为:
L=CrossEntropyLoss(G(z),label)
其中,G(z)为生成的数据,CrossEntropyLoss为交叉熵损失函数,label为标签,为生成网络G的参数的梯度,m为样本数量,log(1-D(G(Zi)))为交叉熵。
5.根据权利要求3所述的方法,其特征在于,长短期记忆网络包括两层网络,第一层为LSTM层,输入层单元数量为14,两层隐层,每层单元数量为50,输出层单元数量为14;第二层为线性网络层,输入层单元数量为14,输出层单元数量为1,激活函数为tanh,batch size为128。
6.根据权利要求1所述的方法,其特征在于,步骤S2中,对生成网络G和判别网络D进行对抗训练,在最大化判别网络D输出的同时最小化生成网络G的输出,通过交替迭代,极小极大问题在Pg=Pdata处获得全局最优,损失函数收敛,生成对抗网络达到纳什均衡,x是真实数据,分布为px;如果x~Px,则D(x)=1;如果x~Pg,则D(x)=0;训练判别网络D以使对真实数据x和生成数据G(z)分配正确标签的概率最大。
7.根据权利要求6所述的方法,其特征在于,对生成网络G和判别网络D进行对抗训练,训练内容为:
其中,z是随机向量,为x来自真实故障数据分布的期望,为x来自虚拟故障数据分布的期望。
8.根据权利要求6所述的方法,其特征在于,判别网络D的梯度Td为:
其中,为判别网络D的参数的梯度,logD(x(i))为生成网络D的输出值,log(1-D(G(Zi)))为KL散度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安交通大学,未经西安交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011290978.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





