[发明专利]数据分块存储至分布式服务器的系统及方法

说明书

技术领域

本发明涉及一种云端技术，尤其涉及一种通过云端技术将数据分块存储至分布式服务器的系统及方法。

背景技术

在云端技术中，当有文件上传及存储时，会经常遇到服务器的存储空间不足、存储进程长期被占用，及文件重复传输等缺陷，从而导致服务器无法及时响应用户的存储请求及无法使用户及时上传文件。

发明内容

鉴于以上内容，有必要提供一种数据分块存储至分布式服务器的系统，其可有效地节省服务器的存储空间，使得服务器的传输进程不会被一个用户长期占用，且加快了用户上传文件的速度。

所述数据分块存储至分布式服务器的系统，运行于一台分配服务器中，该分配服务器通过网络连接多个客户端和多台存储服务器。该系统包括：接收模块，用于接收客户端上传的文件信息和文件的哈希列表，存储到哈希数据库中，该哈希列表中记录了文件的多个数据块的名称、各数据块的哈希值及数据块的分割顺序；计算模块，用于计算所述多台存储服务器的传输进程占用率，及各存储服务器中每个存储区的存储空间；确定模块，用于根据上述计算得到的数值，确定传输进程占用率低于预设值的存储服务器为空闲存储服务器，及确定该存储服务器中有剩余存储空间的存储区；去重模块，用于当哈希数据库中有哈希值与所述存储服务器中已存储的数据块的哈希值相同时，确定该哈希数据库中该哈希值对应的数据块为重复数据块，通知相应客户端所述存储服务器中已存储该数据块而无需再上传该数据块，并返回该重复数据块的存储指针给相应客户端；及分配模块，用于将空闲存储服务器中有剩余存储空间的存储区分配给去重后的各数据块。

还有必要提供一种数据分块存储至分布式服务器的方法，其可有效地节省服务器的存储空间，使得服务器的传输进程不会被一个用户长期占用，且加快了用户上传文件的速度。

所述数据分块存储至分布式服务器的方法，应用于一台分配服务器中，该分配服务器通过网络连接多个客户端和多台存储服务器。该方法包括：接收步骤，接收客户端上传的文件信息和文件的哈希列表，存储到哈希数据库中，该哈希列表中记录了文件的多个数据块的名称、各数据块的哈希值及数据块的分割顺序；计算步骤，计算所述多台存储服务器的传输进程占用率，及各存储服务器中每个存储区的存储空间；确定步骤，根据上述计算得到的数值，确定传输进程占用率低于预设值的存储服务器为空闲存储服务器，及确定该空闲存储服务器中有剩余存储空间的存储区；去重步骤，当哈希数据库中有哈希值与所述存储服务器中已存储的数据块的哈希值相同时，确定哈希数据库中该哈希值对应的数据块为重复数据块，通知相应客户端无需再上传该数据块，并返回该重复数据块的存储指针给相应客户端；及分配步骤，将空闲存储服务器中有剩余存储空间的存储区分配给去重后的各数据块。

相较于现有技术，所述数据分块存储至分布式服务器的系统及方法，通过在服务器集群中加入一个分配服务器，使得各数据块可以被合理地分配到一个存储区，有效地节省了服务器的存储空间，使得服务器的传输进程不会被一个用户长期占用，并加快了用户上传文件的速度。

附图说明

图1是本发明数据分块存储至分布式服务器的系统较佳实施例的运行环境示意图。

图2是图1中分配服务器的主要组成示意图。

图3是本发明数据分块存储至分布式服务器的方法较佳实施例的作业流程图。

图4是本发明用户于客户端下载存储服务器中文件的作业流程图。

主要元件符号说明