[发明专利]一种分布式存储系统标签管理数据存储实现方法

说明书

本发明涉及一种分布式存储系统标签管理数据存储实现方法，该方法适用于分布式存储系统内包含X个元数据管理单元和Y个数据存储单元的场景，X为大于等于1的正整数，Y为大于等于2的正整数，该方法在以上场景中元数据管理单元会对每个数据存储单元进行标签管理，当业务主机有数据读写请求时，元数据管理单元同时会对数据读写请求的类型做出判断并适配相应的标签，再根据相应标签将数据读写请求转至相应的数据存储单元处理。

技术领域

本发明专利涉及计算机存储领域，特别是分布式存储领域。

背景技术

分布式存储系统，是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。

在大数据环境下，数据规模和复杂度的增加往往非常迅速，对系统的扩展性能要求较高。实现存储系统的高可扩展性首先要解决两个方面的重要问题，包含元数据的分配和数据的透明迁移。元数据的分配主要通过静态子树划分技术实现，后者则侧重数据迁移算法的优化。此外，大数据存储体系规模庞大．结点失效率高，因此还需要完成一定的自适应管理功能。系统必须能够根据数据量和计算的工作量估算所需要的结点个数，并动态地将数据在结点间迁移。以实现负载均衡；同时．结点失效时，数据必须可以通过副本等机制进行恢复，不能对上层应用产生影响。

传统数据存储模型需要支持尽可能多的应用，因此需要具备较好的通用性。大数据具有大规模、高动态及快速处理等特性，通用的数据存储模型通常并不是最能提高应用性能的模型．而大数据存储系统对上层应用性能的关注远远超过对通用性的追求。针对应用和负载来优化存储，就是将数据存储与应用耦合。简化或扩展分布式文件系统的功能，根据特定应用、特定负载、特定的计算模型对文件系统进行定制和深度优化，使应用达到最佳性能。

分布式存储系统的数据存储量规模巨大，如果所有的数据读写操作都以全文检索来进行，会造成分布式存储的访问性能压力问题。

发明专利内容

本发明专利涉及一种分布式存储系统标签管理数据存储实现方法，该方法适用于分布式存储系统内包含X个元数据管理单元和Y个数据存储单元的场景，X为大于等于1的正整数，Y为大于等于2的正整数，该方法在以上场景中元数据管理单元会对每个数据存储单元进行标签管理，当业务主机有数据读写请求时，元数据管理单元同时会对数据读写请求的类型做出判断并适配相应的标签，再根据相应标签将数据读写请求转至相应的数据存储单元处理。

附图说明

图1为本发明专利的一种分布式存储系统标签管理数据存储实现方法结构示意图。

具体实施方式

为了使本发明专利的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明专利进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明专利，并不用于限定本发明专利。

请参阅图1，图1为本发明专利的一种分布式存储系统标签管理数据存储实现方法结构示意图。