[发明专利]基于异构多副本的分布式存储动态防御系统及方法

说明书

本发明提供了一种基于异构多副本的分布式存储动态防御系统，包括用户应用层、异构多副本存储系统控制调度器、控制通道、数据通道、多元异构分布式存储系统以及异构构件池，用户应用层用于对异构多副本存储系统控制调度器发送指令；异构多副本存储系统控制调度器用于接收用户应用层的指令、并统一调度控制；控制通道用于向多元异构分布式存储系统下发控制命令、实现接口调用；数据通道用于与多元异构分布式存储系统数据传输；多元异构分布式存储系统用于接收控制命令，实现分布式系统的多元存储；异构构件池用于存储数据资源。本发明实现了分布式存储，提升了防御机制，且解决了异构多副本分布式存储系统的计算压力和磁盘写入瓶颈。

技术领域

本发明涉及分布式存储领域，具体地，涉及一种基于异构多副本的分布式存储动态防御系统及方法。

背景技术

现有的GlusterFS、Ceph、MooseFS等分布式存储系统主要是侧重于数据跨多节点的融合共享存储介质的存储方式。存储系统软件自身对被存储数据的多个副本或者多个备份有数据一致性保障机制，但是被存储数据的安全性却没有足够的保障机制。因此当单一技术来源的单一分布式存储系统被黑客攻击并进行了RootKit隐匿后门的Hook API注入攻击后就可以对用户的读写数据进行拦截、写入嵌套木马程序等，达到篡改和窃取用户数据的目的。此外，单一分布式存储系统在元数据管理、数据一致性管理、大文件写IO存储效率、小文件写IO效率以及数据冗余机制设计等方面总是存在某些方面的优势和某些方面劣势，因而在安全性、存储性能和存储利用率等方面总是存在短板，现有系统不能很好的满足用户的高标准使用场景需求。

申请号为201410206795.1的发明专利公开了一种分布式存储系统中管理异构副本的方法及装置，其中方法包括：获取用于存储文件的副本的写请求参数；根据写请求参数从元数据服务器获取分布式存储系统中每个存储服务器的位置信息；根据写请求参数将文件的副本按照预先指定的格式转换得到多个不同格式的文件的异构副本；根据从元数据服务器获取的存储服务器的位置信息，将转换得到的多个不同格式的文件的异构副本分别存储在指定的存储服务器上。通过本发明的实施例可以将一个文件在多个存储服务器中分别存储多个不同的异构副本，在读取文件的异构副本时，可以根据需要读取对应的异构副本，能够有效提高用户处理数据的工作效率。对比专利主要是通过对元数据服务器进行管理，从元数据服务器中获取分布式存储系统中每个存储服务器的位置信息，根据请求参数将文件的副本按照预先指定的格式转换得到多个不同格式的文件的异构副本。本专利主要是通过对现有常用的典型分布式存储系统，基于每一种分布式存储系统的优势特点作为基础，保留原有分布式存储系统的架构方式不受改变，构建基于动态异构冗余带有安全防御策略的异构分布式存储系统。对比专利主要是通过写请求参数将文件的副本按照预先指定的格式转换得到多个不同格式的文件的异构副本，从元数据服务器获取的存储服务器的位置信息，将转换得到的多个不同格式的文件的异构副本分别存储在指定的存储服务器上。本专利是通过对用户业务数据的具体冗余数量需求，选择最优化的异构存储执行体构建满足业务需求，数据的读写由各个分布式存储系统的自身进行维护，数据一致性校验值以及数据所在某一个分布式存储系统上，则由异构多副本分布式存储系统进行管理，遵循不重复造轮子的原则。