[发明专利]一种分布式存储集群日志存储优化方法、系统及终端有效
| 申请号: | 202110679915.X | 申请日: | 2021-06-18 |
| 公开(公告)号: | CN113392079B | 公开(公告)日: | 2022-06-14 |
| 发明(设计)人: | 张精亮;贺计文 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F16/182;G06F21/60;G06F21/62 |
| 代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 黄晓燕 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 分布式 存储 集群 日志 优化 方法 系统 终端 | ||
1.一种分布式存储集群日志存储优化方法,其特征在于,所述方法包括:
通过与分布式存储集群中各节点进行通信,实时监听所述分布式存储集群的日志读写任务,且当获取到日志读写任务时,对所述日志读写任务分配唯一的缓存编号,所述缓存编号用于根据所述日志读写任务从分布式存储集群中拉取日志内容;
在日志读写过程中出现集群故障时,对所述日志内容开启重试机制,所述集群故障包括:抖动网络不佳故障、时延故障以及日志信息丢失故障中的至少一种;
对所述日志内容进行日志完整性检测;
日志完整性检测合格后,根据日志配置库中的日志配置信息,对日志内容进行分类;
根据日志参数对日志内容进行统计,所述日志参数包括:日志的大小、节点、类别和加密信息;
存储所述日志内容;
根据所获取的访问命令,对分布式存储集群的日志数据进行访问,并将访问结果反馈至所述分布式存储集群节点。
2.根据权利要求1所述的一种分布式存储集群日志存储优化方法,其特征在于,在日志读写过程中出现集群故障时,对所述日志内容开启重试机制的方法,包括:
在日志读写过程中出现集群故障时,重新对所拉取的日志内容进行缓存;
判断重新执行的缓存次数是否超过设定的重试阈值;
如果是,停止对所述日志读写任务进行缓存操作;
如果否,继续对所述拉取的日志内容进行缓存直到集群故障消失。
3.根据权利要求1所述的一种分布式存储集群日志存储优化方法,其特征在于,对所述日志内容进行日志完整性检测的方法,包括:
对所述日志内容进行第一次日志完整性检测;
当第一次日志完整性检测结果不合格时,删除所述日志内容,并通过发送日志读写监听请求,再次获取日志内容;
重新对再次获取的日志内容进行完整性检测,直到日志完整性检测结果合格。
4.根据权利要求1所述的一种分布式存储集群日志存储优化方法,其特征在于,根据所述日志参数,对所述日志内容进行存储的方法,具体为:
根据所述日志参数,将所述日志内容存储至mongodb数据集群中。
5.根据权利要求1所述的一种分布式存储集群日志存储优化方法,其特征在于,所述日志配置信息包括:告警、事件、操作和级别。
6.根据权利要求1所述的一种分布式存储集群日志存储优化方法,其特征在于,根据日志配置库中的日志配置信息,对日志内容进行分类之后,所述方法还包括:
根据所获取的加密命令,对日志内容进行加密。
7.根据权利要求6所述的一种分布式存储集群日志存储优化方法,其特征在于,根据所获取的访问命令,对分布式存储集群的日志数据进行访问,并将访问结果反馈至所述分布式存储集群节点,包括:
根据所获取的访问命令,对分布式存储集群的日志数据进行访问;
对加密后的日志内容进行反向解析;
将访问结果和反向解析结果反馈至所述分布式存储集群节点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110679915.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种洗碗机及其控制方法
- 下一篇:窗帘驱动装置和电动窗帘





