[发明专利]分布式存储系统数据处理方法、装置及设备和存储介质在审
| 申请号: | 202010071657.2 | 申请日: | 2020-01-21 |
| 公开(公告)号: | CN111327685A | 公开(公告)日: | 2020-06-23 |
| 发明(设计)人: | 李娟;张海军;谢全泉 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F9/50;G06F11/30;G06F16/27 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王晓坤 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 存储系统 数据处理 方法 装置 设备 存储 介质 | ||
1.一种分布式存储系统数据处理方法,其特征在于,包括:
当从节点出现异常信息时,判断所述异常信息是否达到上报级别;
如果否,则将所述异常信息放入所述从节点对应的异常队列中;如果是,则将所述异常信息上报至主节点;
对所述异常队列中的异常信息进行遍历,筛选出异常信息中可直接恢复的错误,主动进行异常恢复。
2.根据权利要求1所述的数据处理方法,其特征在于,在所述判断所述异常信息是否达到上报级别之前,还包括:
读取所述从节点对应的异常队列中的历史异常记录;
将所述异常信息与所述历史异常记录进行比对,以判断所述异常信息是否出现过;
如果是,则对出现过的该异常信息的发生时间段以及发生次数进行更新;
如果否,则对未出现过的该异常信息新增异常记录,所述异常记录至少包括异常信息的发生时间段以及发生次数。
3.根据权利要求2所述的数据处理方法,其特征在于,所述判断所述异常信息是否达到上报级别包括:
获取预先建立的异常规则文件,所述异常规则文件用于记录各异常信息达到上报级别时所需的发生时间段规则以及发生次数阈值;
判断所述异常规则文件中是否存在所述异常信息对应的规则记录;
如果存在,则判断所述异常信息在对应发生时间段发生次数是否超过所述发生次数阈值,如果是,则确定所述异常信息达到上报级别;如果否,则确定所述异常信息未达到上报级别。
4.根据权利要求3所述的数据处理方法,其特征在于,在所述判断所述异常规则文件中是否存在所述异常信息对应的规则记录之后还包括:
如果不存在,则将不存在的异常信息记录至日志文件中,并上报至主节点。
5.根据权利要求1至4任一项所述的数据处理方法,其特征在于,所述筛选出异常信息中可直接恢复的错误,主动进行异常恢复包括:
获取异常恢复文件;
判断所述异常恢复文件中是否存在对应错误的可恢复操作;
如果存在,则按照所述可恢复操作执行命令,以主动进行异常恢复。
6.根据权利要求5所述的数据处理方法,其特征在于,在所述按照所述可恢复操作执行命令,以主动进行异常恢复之后还包括:
如果恢复命令返回符合要求,则将所述异常信息从所述异常队列中删除;
如果恢复命令返回不符合要求,则认为恢复操作失败,从所述异常队列中依次读取异常信息进行异常恢复操作。
7.根据权利要求1所述的数据处理方法,其特征在于,所述对所述异常队列中的异常信息进行遍历,筛选出异常信息中可直接恢复的错误,主动进行异常恢复包括:
主节点按照预设巡检周期对从节点分别维护的异常队列中的异常信息进行遍历,筛选出异常信息中可直接恢复的错误,主动进行异常恢复。
8.一种分布式存储系统数据处理装置,其特征在于,包括:
异常上报模块,用于当从节点出现异常信息时,判断所述异常信息是否达到上报级别;如果否,则将所述异常信息放入所述从节点对应的异常队列中;如果是,则将所述异常信息上报至主节点;
异常处理模块,用于对所述异常队列中的异常信息进行遍历,筛选出异常信息中可直接恢复的错误,主动进行异常恢复。
9.一种分布式存储系统数据处理设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至7任一项所述分布式存储系统数据处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述分布式存储系统数据处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010071657.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:应用数据迁移方法、装置
- 下一篇:一种基于图像分割的岩屑荧光选样方法





