[发明专利]一种分布式文件系统的验证方法、装置、设备及存储介质有效
申请号: | 202010057938.2 | 申请日: | 2020-01-19 |
公开(公告)号: | CN111258871B | 公开(公告)日: | 2022-08-19 |
发明(设计)人: | 张东东 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34 |
代理公司: | 北京连和连知识产权代理有限公司 11278 | 代理人: | 宋薇薇 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件系统 验证 方法 装置 设备 存储 介质 | ||
1.一种分布式文件系统的验证方法,其特征在于,所述方法包括以下步骤:
测试节点基于从分布式文件系统集群获取的存储策略列表确定指标参数-存储规则对照表;
所述测试节点根据所述存储策略列表中包含的存储策略生成测试数据,并将所述测试数据依据所述存储策略分别上传至所述分布式文件系统集群的相应存储路径下;
对所述分布式文件系统集群中的所述测试数据分别多次执行影响所述测试数据的指标参数的指定操作;
根据所述分布式文件系统集群日志分别计算所述测试数据的当前指标参数,并记录所述测试数据的当前存储路径;
根据所述当前指标参数、所述当前存储路径和所述指标参数-存储规则对照表验证所述分布式文件系统集群的存储策略的生效性;
响应于经验证所述分布式文件系统的存储策略生效,将所述分布式文件系统集群中的所述测试数据下载至所述测试节点;
根据所述下载的测试数据和所述生成的测试数据验证所述分布式文件系统集群的数据一致性。
2.根据权利要求1所述的方法,其特征在于,所述根据所述分布式文件系统集群日志分别计算所述测试数据的当前指标参数,并记录所述测试数据的当前存储路径进一步包括:
遍历所述分布式文件系统集群的文件编辑日志和文件调用日志;
根据所述测试数据在所述文件编辑日志和所述文件调用日志中出现的频次以及所述文件编辑日志和所述文件调用日志对应的权重分别计算所述测试数据的当前指标参数。
3.根据权利要求1所述的方法,其特征在于,所述对所述分布式文件系统集群中的所述测试数据分别多次执行影响所述测试数据的指标参数的指定操作进一步包括:
对所述分布式文件系统集群中的所述测试数据分别以不同次数执行数据读写和/或数据计算和/或样本任务执行操作。
4.一种分布式文件系统的验证装置,其特征在于,所述装置包括:
验证标准生成模块,所述验证标准生成模块配置为在测试节点基于从分布式文件系统集群获取的存储策略列表确定指标参数-存储规则对照表;
测试数据推送模块,所述测试数据推送模块配置为在所述测试节点根据所述存储策略列表中包含的存储策略生成测试数据,并将所述测试数据依据所述存储策略分别上传至所述分布式文件系统集群的相应存储路径下;
测试操作执行模块,所述测试操作执行模块配置为对所述分布式文件系统集群中的所述测试数据分别多次执行影响所述测试数据的指标参数的指定操作;
测试参数获取模块,所述测试参数获取模块配置为根据所述分布式文件系统集群日志分别计算所述测试数据的当前指标参数,并记录所述测试数据的当前存储路径;
生效性验证模块,所述生效性验证模块配置为根据所述当前指标参数、所述当前存储路径和所述指标参数-存储规则对照表验证所述分布式文件系统集群的存储策略的生效性;
其中,所述装置进一步包括:
测试数据下载模块,所述测试数据下载模块配置为响应于经验证所述分布式文件系统的存储策略生效,将所述分布式文件系统集群中的所述测试数据下载至所述测试节点;
一致性验证模块,所述一致性验证模块配置为根据所述下载的测试数据和所述生成的测试数据验证所述分布式文件系统集群的数据一致性。
5.根据权利要求4所述的装置,其特征在于,所述测试参数获取模块进一步配置为遍历所述分布式文件系统集群的文件编辑日志和文件调用日志;根据所述测试数据在所述文件编辑日志和所述文件调用日志中出现的频次以及所述文件编辑日志和所述文件调用日志对应的权重分别计算所述测试数据的当前指标参数。
6.根据权利要求4所述的装置,其特征在于,所述测试操作执行模块进一步配置为对所述分布式文件系统集群中的所述测试数据分别以不同次数执行数据读写和/或数据计算和/或样本任务执行操作。
7.一种分布式文件系统的验证设备,其特征在于,所述设备包括:
至少一个处理器;和
存储器,所述存储器存储有处理器可运行的程序指令,所述程序指令在被处理器运行时执行前述权利要求1至3任一项所述的分布式文件系统的验证方法的步骤。
8.一种存储介质,其特征在于,所述存储介质存储有处理器可运行的程序指令,所述程序指令在被处理器运行时执行前述权利要求1至3任一项所述的分布式文件系统的验证方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010057938.2/1.html,转载请声明来源钻瓜专利网。