[发明专利]自适应的数据恢复流控方法、装置、电子设备及存储介质有效

专利信息
申请号: 201810565004.2 申请日: 2018-06-04
公开(公告)号: CN108804039B 公开(公告)日: 2021-01-29
发明(设计)人: 陈学伟 申请(专利权)人: 平安科技(深圳)有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 深圳市赛恩倍吉知识产权代理有限公司 44334 代理人: 杨毅玲
地址: 518000 广东省深*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 自适应 数据 恢复 方法 装置 电子设备 存储 介质
【权利要求书】:

1.一种自适应的数据恢复流控方法,其特征在于,所述方法包括:

a)定期同步分布式存储系统中的各个存储节点的信息;

b)侦测是否有存储节点发生了故障;

c)当侦测到有存储节点发生了故障时,获取发生故障的存储节点的存储列表;

d)识别上一个统计周期内用户应用的IO负载类别,所述识别上一个统计周期内用户应用的IO负载类别包括:获取所述上一个统计周期内用户应用的每一个IO的数据块大小,计算所述上一个统计周期内的IO的平均数据块大小;获取所述上一个统计周期内的每个数据块的传输时延,计算所述上一个统计周期内的IO的平均数据块时延;获取预先设置的IO的数据块大小的基准值及对应的数据块时延的基准值;采用公式计算所述上一个统计周期内的IO负载强度,其中,X为所述上一个统计周期内的所述IO的平均数据块大小,Y为所述平均数据块时延,M为所述数据块大小的基准值,N为所述对应的数据块时延的基准值;根据所述上一个统计周期内的IO负载强度,利用预先训练好的负载分类模型确定所述上一个统计周期内的IO负载类别;

e)根据所述上一个统计周期内的IO负载类别计算当前统计周期对应的流控阈值;

f)根据所述存储列表及所述当前统计周期对应的流控阈值,对发生故障的存储节点的当前统计周期内的数据执行恢复操作;

重复执行d)-f),直至对所述发生故障的存储节点的所有统计周期内的数据执行了恢复操作。

2.如权利要求1所述的方法,其特征在于,所述根据所述上一个统计周期内的IO负载类别计算当前统计周期对应的流控阈值包括:

采用预先设置的流控阈值作为第一个统计周期对应的流控阈值。

3.如权利要求1所述的方法,其特征在于,所述IO负载类别包括:高负载类别、正常负载类别、低负载类别,所述根据上一个统计周期内的IO负载类别计算当前统计周期对应的流控阈值包括:

当所述上一个统计周期内的IO负载类别为高负载类别时,将所述上一个统计周期对应的流控阈值降低第一预设幅度,得到当前统计周期对应的流控阈值;

当所述上一个统计周期内的IO负载类别为低负载类别时,将所述上一个统计周期对应的流控阈值提高第二预设幅度,得到下一个统计周期对应的流控阈值;

当所述上一个统计周期内的IO负载类别为正常负载类别时,将所述上一个统计周期对应的流控阈值作为当前统计周期对应的流控阈值。

4.如权利要求1所述的方法,其特征在于,所述侦测是否有存储节点发生故障包括:

侦测所述分布式存储系统中的任何一个或者多个存储节点是否发生了无法启动、断电或断网;或者

侦测所述分布式存储系统中的任何一个或者多个存储节点中的磁盘是否发生了故障。

5.如权利要求1至4中任意一项所述的方法,其特征在于,所述同步分布式存储系统中的各个存储节点的信息包括:

由所述分布式存储系统中的一个存储中心执行各个存储节点的信息同步;或者

采用去中心化的方法,由所述分布式存储系统中的任何一个存储节点发起各个存储节点的信息同步。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810565004.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top