[发明专利]一种元数据存储方法、装置、设备及计算机可读存储介质在审
| 申请号: | 201811043806.3 | 申请日: | 2018-09-07 |
| 公开(公告)号: | CN109144425A | 公开(公告)日: | 2019-01-04 |
| 发明(设计)人: | 刘洪栋 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
| 地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 元数据 落盘 元数据存储 计算机可读存储介质 目标文件 数据池 指针 扫描 分布式集群 存储系统 技术效果 文件执行 创建 存储 | ||
1.一种基于分布式集群存储系统的元数据存储方法,其特征在于,包括:
在第一目标文件被修改或者创建时,将目录列表中存储的与所述第一目标文件对应的脏元数据指针存入脏元数据列表;
在执行脏元数据落盘操作时,仅扫描所述脏元数据列表中的脏元数据指针,将与所述脏元数据列表对应的脏元数据落盘至数据池。
2.根据权利要求1所述的元数据存储方法,其特征在于,所述将与所述脏元数据列表对应的脏元数据落盘至数据池之后,还包括:
将所述脏元数据列表中已经落盘至数据池的脏元数据指针置为Clean状态。
3.根据权利要求2所述的元数据存储方法,其特征在于,还包括:
判断元数据服务器中缓存的元数据是否超过预定阈值;
若是,则删除元数据指针状态为Clean的元数据指针及对应的元数据。
4.根据权利要求3所述的元数据存储方法,其特征在于,还包括:
在第二目标文件被修改时,判断是否能根据所述脏元数据列表查找到与所述第二目标文件对应的元数据;
若能,则根据所述脏元数据列表对与所述第二目标文件对应的元数据进行修改,并将所述脏元数据列表中与所述第二目标文件对应的元数据指针置为Dirty状态;其中,置为Dirty状态的元数据指针即为脏元数据指针;
若不能,判断是否能根据所述目录列表查找到与所述第二目标文件对应的元数据;若能查找到,则根据所述目录列表对与所述第二目标文件对应的元数据进行修改,并将所述目录列表中与所述第二目标文件对应的元数据指针置为Dirty状态,并加入所述脏元数据列表;
若查找不到,则从数据池中加载与所述第二目标文件的元数据并修改。
5.一种基于分布式集群存储系统的元数据存储装置,其特征在于,包括:
脏元数据指针存储模块,用于在第一目标文件被修改或者创建时,将目录列表中存储的与所述第一目标文件对应的脏元数据指针存入脏元数据列表;
元数据落盘模块,用于在执行脏元数据落盘操作时,仅扫描所述脏元数据列表中的脏元数据指针,将与所述脏元数据列表对应的脏元数据落盘至数据池。
6.根据权利要求5所述的元数据存储装置,其特征在于,还包括:
第一指针状态设置模块,用于将与所述脏元数据列表对应的脏元数据落盘至数据池之后,将所述脏元数据列表中已经落盘至数据池的脏元数据指针置为Clean状态。
7.根据权利要求6所述的元数据存储装置,其特征在于,还包括:
第一判断模块,用于判断元数据服务器中缓存的元数据是否超过预定阈值;
删除模块,用于在元数据服务器中缓存的元数据超过预定阈值时,删除元数据指针状态为Clean的元数据指针及对应的元数据。
8.根据权利要求7所述的元数据存储装置,其特征在于,还包括:
第二判断模块,用于在第二目标文件被修改时,判断是否能根据所述脏元数据列表查找到与所述第二目标文件对应的元数据;
第一操作模块,用于能根据所述脏元数据列表查找到与所述第二目标文件对应的元数据时,根据所述脏元数据列表对与所述第二目标文件对应的元数据进行修改;并将所述脏元数据列表中与所述第二目标文件对应的元数据指针置为Dirty状态;其中,置为Dirty状态的元数据指针即为脏元数据指针;
第三判断模块,用于不能根据所述脏元数据列表查找到与所述第二目标文件对应的元数据时,判断是否能根据所述目录列表查找到与所述第二目标文件对应的元数据;
第二操作模块,用于能根据所述目录列表查找与所述第二目标文件对应的元数据时,根据所述目录列表对与所述第二目标文件对应的元数据进行修改;并将所述目录列表中与所述第二目标文件对应的元数据指针置为Dirty状态,并加入所述脏元数据列表;
第三操作模块,用于不能根据所述目录列表查找与所述第二目标文件对应的元数据时,从数据池中加载与所述第二目标文件的元数据并修改。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811043806.3/1.html,转载请声明来源钻瓜专利网。





