[发明专利]一种网络云盘的数据存储方法有效
申请号: | 201611209515.8 | 申请日: | 2016-12-23 |
公开(公告)号: | CN108243207B | 公开(公告)日: | 2019-03-15 |
发明(设计)人: | 熊兆;黄玉甫;安西民 | 申请(专利权)人: | 中科星图股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06 |
代理公司: | 北京安博达知识产权代理有限公司 11271 | 代理人: | 徐国文 |
地址: | 101399 北京市顺义区临空经济核*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 云盘 数据文件 存储 上传 服务器 数据存储 客户端 哈希 客户端登录 网络 数据块 算法 | ||
本发明公开了一种网络云盘的数据存储方法,该方法包括:客户端登录网络云盘,并从本地获取需要存储的数据文件,上传其哈希值,云盘服务器根据哈希值判断该数据文件是否已存储,如果已存储,则通知该客户端不用上传,方法结束;如果未存储,则通知该客户端上传该数据文件至所述云盘服务器;云盘服务器按照预定的算法对该数据文件划分数据块并存储。
【技术领域】
本发明属于计算机和互联网领域,具体的,涉及一种网络云盘的数据存储方法。
【背景技术】
近年来,随着互联网的发展,网络云盘(简称网盘、云盘)成为了一种互联网上常见的数据存储服务,该服务由一个互联网服务商提供大容量的数据存储空间,用户可以随时随地使用客户端连接该互联网服务器提供的服务器,上传和下载自己的数据文件。
现有技术中,客户端在向网络云盘上传文件前,首先计算其Hash值,然后上传Hash值,由服务器根据该Hash判断是否已经存储了该文件,如果已经存储了,就无需重复上传了。这种方法可以发现重复上传的文件,从而用户可以发现某些文件几乎是瞬间上传完成,提高了文件上传的效率。
但是,即使一个文件已经存储在服务器上了,如果用户对该文件稍加改动,整个文件的Hash值就不再相同,从而整个文件就必须全部存储,虽然文件的绝大部分内容都没有变化。在这种情况下,现有技术中的方法就不再适用,其实际上浪费了大量的数据存储能力。
【发明内容】
为了解决现有技术中的上述问题,本发明提出了一种网络云盘的数据存储方法,其技术方案如下:
一种网络云盘的数据存储方法,该方法包括以下步骤:
步骤100:客户端登录网络云盘,并从本地获取需要存储的数据文件;所述客户端计算该数据文件的哈希值,并发送给云盘服务器;所述云盘服务器根据该哈希值判断该数据文件是否存储。如果已存储,则通知该客户端不用上传,方法结束;如果未存储,则通知该客户端上传该数据文件至所述云盘服务器;
步骤200:在该数据文件的长度未超过预定长度时,所述云盘服务器直接将该数据文件发送给相应存储服务器存储,方法结束;否则,所述云盘服务器将该数据文件按照M种方式划分数据块,由相应存储服务器检查不同划分方式的数据重复量;
步骤300:所述云盘服务器从M种方式选择数据重复量最大的n种方式作为最终的数据存储方式。
进一步地,M=5,n=2;或者M=3,n=2;或者M=5,n=3。
进一步地,所述云盘服务器提供网络云盘的Web页面,并管理整个云盘的文件存储。
本发明的技术效果是:可以发现相似文件中的相同内容,从而提高了网络云盘的数据存储效率,节省了网络流量。
【附图说明】
此处所说明的附图是用来提供对本发明的进一步理解,构成本申请的一部分,但并不构成对本发明的不当限定,在附图中:
图1是本发明方法所应用的系统结构图。
【具体实施方式】
下面将结合附图以及具体实施例来详细说明本发明,其中的示意性实施例以及说明仅用来解释本发明,但并不作为对本发明的不当限定。
参见附图1,其示出了本发明方法所应用的系统结构,该系统包括客户端、云盘服务器和多个存储服务器,所述云盘服务器提供网络云盘的Web页面,并管理整个云盘的文件存储,用户使用所述客户端访问该云盘服务器,获取该Web页面,通过该Web页面上传和下载数据文件,所述存储服务器是用于存储数据的后台服务器。为了存储海量的数据,本发明的优选方案是使用256个存储服务器,当然这是对于大型数据存储系统而言的,如果云盘服务提供商是小型企业,为了减少成本,也可以考虑将其中的多个服务器合并成一个,从而减少存储服务器数量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科星图股份有限公司,未经中科星图股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611209515.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种服务器集群区域管理方法
- 下一篇:一种数据同步方法及装置