[发明专利]分布式文件系统日志提交方法、装置、设备及存储介质在审
| 申请号: | 202010105026.8 | 申请日: | 2020-02-20 |
| 公开(公告)号: | CN111339044A | 公开(公告)日: | 2020-06-26 |
| 发明(设计)人: | 张其万;孟祥瑞 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F16/18;G06F16/182 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张春辉 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 文件系统 日志 提交 方法 装置 设备 存储 介质 | ||
1.一种分布式文件系统日志提交方法,其特征在于,包括:
确定待写入日志,并对所述待写入日志进行日志封装处理,得到封装后的待落盘数据;
对所述待落盘数据执行落盘操作,并实时判断是否发生写入覆盖;
若判定发生写入覆盖,确定所述待落盘数据的正确写入位置;
控制所述待落盘数据根据所述正确写入位置进行日志落盘处理。
2.如权利要求1所述的分布式文件系统日志提交方法,其特征在于,所述实时判断是否发生写入覆盖,包括:
实时获取所述待落盘数据的即将写入位置以及正确写入位置;
判断所述即将写入位置是否大于所述正确写入位置;
若是,判定未发生写入覆盖;
若否,判定发生写入覆盖。
3.如权利要求1所述的分布式文件系统日志提交方法,其特征在于,所述确定所述待落盘数据的正确写入位置,包括:
维护全局right_pos;
根据所述全局right_pos确定所述待落盘数据的正确写入位置。
4.如权利要求1所述的分布式文件系统日志提交方法,其特征在于,还包括:若判定发生写入覆盖,控制底层存储返回错误信息。
5.如权利要求1所述的分布式文件系统日志提交方法,其特征在于,在对所述待落盘数据执行落盘操作之前,还包括:
判断所述待落盘数据是否大于最大日志条目数量或最大字节数;
若是,对所述待落盘数据执行落盘操作,具体为:对所述待落盘数据分若干次执行落盘操作;
若否,执行对所述待落盘数据执行落盘操作的步骤。
6.一种分布式文件系统日志提交装置,其特征在于,包括:
数据封装单元,用于确定待写入日志,并对所述待写入日志进行日志封装处理,得到封装后的待落盘数据;
落盘监控单元,用于对所述待落盘数据执行落盘操作,并实时判断是否发生写入覆盖;
位置确定单元,用于若判定发生写入覆盖,确定所述待落盘数据的正确写入位置;
落盘处理单元,用于控制所述待落盘数据根据所述正确写入位置进行日志落盘处理。
7.如权利要求6所述的分布式文件系统日志提交装置,其特征在于,所述落盘监控单元包括:落盘启动单元以及覆盖判断单元,其中,用于实时判断是否发生写入覆盖的所述覆盖判断单元包括:
位置确定子单元,用于实时获取所述待落盘数据的即将写入位置以及正确写入位置;
位置判断子单元,用于判断所述即将写入位置是否大于所述正确写入位置;
第一判定子单元,用于若所述即将写入位置大于所述正确写入位置,判定未发生写入覆盖;
第二判定子单元,用于若所述即将写入位置不大于所述正确写入位置,判定发生写入覆盖。
8.如权利要求6所述的分布式文件系统日志提交装置,其特征在于,所述位置确定单元包括:
维护子单元,用于维护全局right_pos;
确定子单元,用于根据所述全局right_pos确定所述待落盘数据的正确写入位置。
9.一种分布式文件系统日志提交设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至5任一项所述的分布式文件系统日志提交方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有程序,所述程序被处理器执行时实现如权利要求1至5任一项所述分布式文件系统日志提交方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010105026.8/1.html,转载请声明来源钻瓜专利网。





