[发明专利]一种云存储系统中使数据均匀分布的方法有效
申请号: | 201410841392.4 | 申请日: | 2014-12-30 |
公开(公告)号: | CN104580439B | 公开(公告)日: | 2020-01-03 |
发明(设计)人: | 杨卫华;黄钦皇 | 申请(专利权)人: | 深圳创新科技术有限公司;深圳创新科软件技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 11018 北京德琦知识产权代理有限公司 | 代理人: | 杜志敏;宋志强 |
地址: | 518057 广东省深圳市南山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 存储系统 数据 均匀分布 方法 | ||
本申请公开了一种云存储系统中使数据均匀分布的方法,A、客户端向元数据服务节点发出写请求,所述写请求中包括所需的存储空间、文件基本信息、现在要写第几个数据块;B、元数据服务节点运用哈希算法,从所有可用的存储服务节点中随机出一个,再运用哈希算法在所选的存储服务节点上随机选出一个磁盘,元数据服务节点将所选的存储服务节点以及磁盘的标识作为位置分配信息进行保存;C、元数据服务节点将位置分配信息发送至客户端;D、客户端根据所述位置分配信息将数据写入相应位置的磁盘。E、客户端判断是否写满当前数据块,若是,返回步骤A,否则继续执行步骤F;F、客户端判断是否完成写入过程,若是结束本流程,否则返回步骤A。
技术领域
本申请涉及计算机网络及存储技术领域,尤其涉及一种云存储系统中使数据均匀分布的方法。
背景技术
随着计算机网络,特别是因特网(Internet)的迅猛发展,越来越多的资料被数据化,全球信息存储量每年急剧增长。传统的信息系统概念发生了巨大的变化,这些变化突出地表现在信息的存储、传递、发布以及获取方式所发生的革命性变革。与此同时,大量数据密集型应用,如视频监控,广电行业,数字图书馆,医疗视频图像处理,海量视频在线编辑等,对存储系统的容量,性能,安全性,可扩展性和可用性提出了更高要求。传统的直接数据存储方式过于简单化,过于集中管理而造成了大量数据的堆积。这样需要大量的存储数据的介质,而导致服务器的回应下降乃至崩溃,这样一来就会有大量数据会随着服务器的崩溃而丢失。因此传统的直接数据存储模式渐渐不能满足需求,信息存储的需求和应用的复杂性提出了新的存储模式。
云存储是在云计算概念上延伸和发展出来的一个新的概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。与传统的存储设备相比,云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网、和客户端程序等多个部分组成的复杂系统。各部分以存储设备为核心,通过应用软件来对外提供数据存储和业务访问服务。
云存储具有分布数据的功能,实际上它的数据存储方式是物理上是分布的,逻辑上是集中的,也就是说数据和程序可以不位于一个服务器上,而是分散到多个服务器。这样一个服务器出现问题受影响的只是一小部分数据,而且通过自身的修复机制能在短时间内恢复数据。优点分散控制,集中操作、分级管理、配置灵活、高可靠性,易于维护。
然而在实际应用过程中,仍然会出现部分存储服务节点存储量较高,而仍然存在部分存储服务节点的存储量较少的情形。
发明内容
本申请提供了一种云存储系统中数据均匀分布的方法,能够将数据均匀分布到不同的存储服务节点,
本申请实施例提供的一种云存储系统中使数据均匀分布的方法,存储服务节点启动时,向元数据服务节点注册磁盘信息并定期动态报告磁盘的使用情况;该方法包括如下步骤:
A、客户端向元数据服务节点发出写请求,所述写请求中包括所需的存储空间、文件基本信息、现在要写第几个数据块;
B、元数据服务节点运用哈希算法,从所有可用的存储服务节点中随机出一个,再运用哈希算法在所选的存储服务节点上随机选出一个磁盘,元数据服务节点将所选的存储服务节点以及磁盘的标识作为位置分配信息进行保存;
C、元数据服务节点将位置分配信息发送至客户端;
D、客户端根据所述位置分配信息将数据写入相应位置的磁盘。
E、客户端判断是否写满当前数据块,若是,返回步骤A,否则继续执行步骤F;
F、客户端判断是否完成写入过程,若是结束本流程,否则返回步骤A。
较佳地,该方法进一步包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳创新科技术有限公司;深圳创新科软件技术有限公司,未经深圳创新科技术有限公司;深圳创新科软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410841392.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:摄像设备及其控制方法
- 下一篇:一种混合型企业应用系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置