[发明专利]文件分布式存储系统、方法、装置及电子设备

说明书

本发明公开了文件分布式存储方法，包括如下步骤：接收文件读取请求，所述文件读取请求包括文件的位置列表信息；根据所述文件的位置列表信息分别从对应的数据存储单元中读取相应的数据块，并将读取的各数据块处理为完整数据；接收文件的写入请求，所述文件写入请求包括文件的大小以及文件的完整数据；根据所述文件的大小以及预设规则将所述完整数据分割为至少一个数据块；给每一个数据块分配存储位置信息，以得到所述完整数据对应的位置列表信息；将每一个数据块存储至存储位置信息相应的数据存储单元。本发明提供一种弹性的分布式存储系统，将固定于某个节点的文件系统，扩展到任意多个节点，每个存储节点均可被读写，有效解决数据的存储难题。

技术领域

本发明涉及数据存储技术，尤其涉及文件分布式存储系统、方法、装置及电子设备。

背景技术

随着企业系统各种数据的飞速增长以及日积月累的存量数据，单纯通过Scale Up(纵向扩展)方式利用现有的存储系统，通过不断增加存储容量来满足数据增长的需求，而带宽和计算能力并没有相应的增加。所以，整个存储系统很快就会达到性能瓶颈，需要继续扩展。

为了解决以上问题传统方式有两种方法：一是采用更强性能的存储引擎(EMC的Clarion系统和NetApp的FAS系列，采用增加控制器CPU或内存的方式来提供更强的性能)，但是这种方式问题在于价格昂贵；另外一种方法是额外购买的独立的存储系统，这样又会增加管理的复杂度且价格也比较昂贵。

发明内容

为了克服现有技术的不足，本发明的目的之一在于提供文件分布式存储系统，其能解决现有技术存储复杂、价格昂贵的问题。

本发明的目的之二在于提供文件分布式存储方法，其能解决现有技术存储复杂、价格昂贵的问题。

本发明的目的之三在于提供文件分布式存储装置，其能解决现有技术存储复杂、价格昂贵的问题。

本发明的目的之四在于提供一种电子设备，其能解决现有技术存储复杂、价格昂贵的问题。

本发明的目的之一采用以下技术方案实现：

文件分布式存储系统，包括API接口、主命名空间、副命名空间、多个数据存储单元，所述副命名空间与主命名空间连接，多个数据存储单元均与主命名空间连接，API接口与主命名空间连接；

所述AIP接口用于访问文件分布式存储系统，主命名空间用于接收并处理文件读写请求，并根据读写请求从数据存储单元读取数据块或写入数据块至数据存储单元。

本发明的目的之二采用以下技术方案实现：

文件分布式存储方法，包括如下步骤：

接收文件读取请求，所述文件读取请求包括文件的位置列表信息；

根据所述文件的位置列表信息分别从对应的数据存储单元中读取相应的数据块，并将读取的各数据块处理为完整数据；

接收文件的写入请求，所述文件写入请求包括文件的大小以及文件的完整数据；

根据所述文件的大小以及预设规则将所述完整数据分割为至少一个数据块；

给每一个数据块分配存储位置信息，以得到所述完整数据对应的位置列表信息；

将每一个数据块存储至存储位置信息相应的数据存储单元。

优选的，“将读取的各数据块处理为完整数据”具体是对各所述数据块进行解码，并合并为完整数据。

优选的，执行完“将所述完整数据分割为至少一个数据块”后以及执行“给每一个数据块分配存储位置信息”之前，还对每一个分割后的数据块进行封包编码。