[发明专利]一种云存储系统中使数据均匀分布的方法有效

专利信息
申请号: 201410841392.4 申请日: 2014-12-30
公开(公告)号: CN104580439B 公开(公告)日: 2020-01-03
发明(设计)人: 杨卫华;黄钦皇 申请(专利权)人: 深圳创新科技术有限公司;深圳创新科软件技术有限公司
主分类号: H04L29/08 分类号: H04L29/08
代理公司: 11018 北京德琦知识产权代理有限公司 代理人: 杜志敏;宋志强
地址: 518057 广东省深圳市南山*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 存储系统 数据 均匀分布 方法
【说明书】:

本申请公开了一种云存储系统中使数据均匀分布的方法,A、客户端向元数据服务节点发出写请求,所述写请求中包括所需的存储空间、文件基本信息、现在要写第几个数据块;B、元数据服务节点运用哈希算法,从所有可用的存储服务节点中随机出一个,再运用哈希算法在所选的存储服务节点上随机选出一个磁盘,元数据服务节点将所选的存储服务节点以及磁盘的标识作为位置分配信息进行保存;C、元数据服务节点将位置分配信息发送至客户端;D、客户端根据所述位置分配信息将数据写入相应位置的磁盘。E、客户端判断是否写满当前数据块,若是,返回步骤A,否则继续执行步骤F;F、客户端判断是否完成写入过程,若是结束本流程,否则返回步骤A。

技术领域

本申请涉及计算机网络及存储技术领域,尤其涉及一种云存储系统中使数据均匀分布的方法。

背景技术

随着计算机网络,特别是因特网(Internet)的迅猛发展,越来越多的资料被数据化,全球信息存储量每年急剧增长。传统的信息系统概念发生了巨大的变化,这些变化突出地表现在信息的存储、传递、发布以及获取方式所发生的革命性变革。与此同时,大量数据密集型应用,如视频监控,广电行业,数字图书馆,医疗视频图像处理,海量视频在线编辑等,对存储系统的容量,性能,安全性,可扩展性和可用性提出了更高要求。传统的直接数据存储方式过于简单化,过于集中管理而造成了大量数据的堆积。这样需要大量的存储数据的介质,而导致服务器的回应下降乃至崩溃,这样一来就会有大量数据会随着服务器的崩溃而丢失。因此传统的直接数据存储模式渐渐不能满足需求,信息存储的需求和应用的复杂性提出了新的存储模式。

云存储是在云计算概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。与传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心,通过应用软件来对外提供数据存储和业务访问服务。

云存储具有分布数据的功能,实际上它的数据存储方式是物理上是分布的,逻辑上是集中的,也就是说数据和程序可以不位于一个服务器上,而是分散到多个服务器。这样一个服务器出现问题受影响的只是一小部分数据,而且通过自身的修复机制能在短时间内恢复数据。优点分散控制,集中操作、分级管理、配置灵活、高可靠性,易于维护。

然而在实际应用过程中,仍然会出现部分存储服务节点存储量较高,而仍然存在部分存储服务节点的存储量较少的情形。

发明内容

本申请提供了一种云存储系统中数据均匀分布的方法,能够将数据均匀分布到不同的存储服务节点,

本申请实施例提供的一种云存储系统中使数据均匀分布的方法,存储服务节点启动时,向元数据服务节点注册磁盘信息并定期动态报告磁盘的使用情况;该方法包括如下步骤:

A、客户端向元数据服务节点发出写请求,所述写请求中包括所需的存储空间、文件基本信息、现在要写第几个数据块;

B、元数据服务节点运用哈希算法,从所有可用的存储服务节点中随机出一个,再运用哈希算法在所选的存储服务节点上随机选出一个磁盘,元数据服务节点将所选的存储服务节点以及磁盘的标识作为位置分配信息进行保存;

C、元数据服务节点将位置分配信息发送至客户端;

D、客户端根据所述位置分配信息将数据写入相应位置的磁盘。

E、客户端判断是否写满当前数据块,若是,返回步骤A,否则继续执行步骤F;

F、客户端判断是否完成写入过程,若是结束本流程,否则返回步骤A。

较佳地,该方法进一步包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳创新科技术有限公司;深圳创新科软件技术有限公司,未经深圳创新科技术有限公司;深圳创新科软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201410841392.4/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top