[发明专利]一种优化读写访问文件的方法、系统、设备和存储介质在审
| 申请号: | 202111097384.X | 申请日: | 2021-09-18 |
| 公开(公告)号: | CN113805811A | 公开(公告)日: | 2021-12-17 |
| 发明(设计)人: | 张亚奇;董文华;乔红斌 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 北京连和连知识产权代理有限公司 11278 | 代理人: | 张涛;杨帆 |
| 地址: | 250000 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 优化 读写 访问 文件 方法 系统 设备 存储 介质 | ||
1.一种优化读写访问文件的方法,其特征在于,包括如下步骤:
在集群中的服务器上部署元数据服务和/或存储服务;
响应于接收到客户端创建并写海量的文件的请求,将所述文件的元数据信息记录到元数据服务,并将文件的数据并行写入多个存储服务;
响应于接收到客户端读海量的文件的请求,从所述元数据服务中获取所述文件的元数据信息;以及
根据所述元数据信息并行地从多个所述存储服务中读取文件的数据。
2.根据权利要求1所述的方法,其特征在于,所述将文件的数据并行写入多个存储服务包括:
将所述文件分割成多个预定大小的数据块,并将多个所述数据块部署到不同的存储服务中。
3.根据权利要求1所述的方法,其特征在于,方法还包括:
在所述集群中部署管理服务,并将部署的所述元数据服务和所述存储服务向所述管理服务进行注册;以及
通过所述管理服务向注册后的所述元数据服务和所述存储服务发送心跳检测。
4.根据权利要求1所述的方法,其特征在于,所述在集群中的服务器上部署元数据服务和/或存储服务包括:
基于服务器磁盘数量组成带有两个独立分布式校验方案的独立数据磁盘。
5.一种优化读写访问文件的系统,其特征在于,包括:
部署模块,配置用于在集群中的服务器上部署元数据服务和/或存储服务;
记录模块,配置用于响应于接收到客户端创建并写海量的文件的请求,将所述文件的元数据信息记录到元数据服务,并将文件的数据并行写入多个存储服务;
获取模块,配置用于响应于接收到客户端读海量的文件的请求,从所述元数据服务中获取所述文件的元数据信息;以及
读取模块,配置用于根据所述元数据信息并行地从多个所述存储服务中读取文件的数据。
6.根据权利要求5所述的系统,其特征在于,所述记录模块配置用于:
将所述文件分割成多个预定大小的数据块,并将多个所述数据块部署到不同的存储服务中。
7.根据权利要求5所述的系统,其特征在于,系统还包括管理模块,配置用于:
在所述集群中部署管理服务,并将部署的所述元数据服务和所述存储服务向所述管理服务进行注册;以及
通过所述管理服务向注册后的所述元数据服务和所述存储服务发送心跳检测。
8.根据权利要求5所述的系统,其特征在于,所述部署模块配置用于:
基于服务器磁盘数量组成带有两个独立分布式校验方案的独立数据磁盘。
9.一种计算机设备,其特征在于,包括:
至少一个处理器;以及
存储器,所述存储器存储有可在所述处理器上运行的计算机指令,所述指令由所述处理器执行时实现权利要求1-4任意一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-4任意一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111097384.X/1.html,转载请声明来源钻瓜专利网。





