[发明专利]分布式数据存储与访问装置在审

专利信息
申请号: 201811638998.2 申请日: 2018-12-29
公开(公告)号: CN111382135A 公开(公告)日: 2020-07-07
发明(设计)人: 陈萌 申请(专利权)人: 上海菱秀自动化科技有限公司
主分类号: G06F16/182 分类号: G06F16/182;G06F16/172;G06F16/17;G06F9/50;G06F11/30
代理公司: 上海浙晟知识产权代理事务所(普通合伙) 31345 代理人: 杨小双
地址: 200000 上海市普陀*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 分布式 数据 存储 访问 装置
【说明书】:

发明公开了一种分布式数据存储与访问装置,属于数据存储装置技术领域。它包括:域名服务器DNS Server,反向代理服务器Nginx,文件自动备份组件MogileFS,数据库管理系统MariaDB,监控平台。将请求代理至后端MogileFS服务器集群中,能实现负载均衡的效果,能对后端的tracker和节点进行健康检测。

技术领域

本发明涉及一种分布式数据存储与访问装置,属于数据存储装置技术领域。

背景技术

目前,随着信息数据处理需求的日益增长以及不同领域的业务种类的日益丰富,海量数据的存储及查询变得越来越重要。由于随着业务种类的日益丰富,需要存储的数据信息也越来越多,同时基于用户请求的数据操作也越来越频繁,从而需要经常对数据信息的存储进行动态的调整。

传统存储在面对海量数据存储表现出诸多局限,例如:纵向扩展受阵列空间限制,横向扩展受交换设备限制,节点受文件系统限制等。而分布式存储的出现在一定程度上有效的缓解了这一问题。

发明内容

本发明所要解决的技术问题在于:提供一种分布式数据存储与访问装置,它解决了传统存储在面对海量数据存储以上诸多局限的问题。

本发明所要解决的技术问题采取以下技术方案来实现:

分布式数据存储与访问装置,它包括:

域名服务器DNS Server,用户通过客户端向DNS Server发送用户请求;

反向代理服务器Nginx,Nginx接收DNS Server发出的用户请求;

文件自动备份组件MogileFS,MogileFS包括调度器Tracker和存储节点StorageNode两部分,Nginx通过调度将用户请求转达给其中一个MogileFS的Tracker,Tracker接收到用户请求向Storage Node获取存储位置并返回给Nginx;

数据库管理系统MariaDB:Nginx接到存储位置再到MariaDB的存储上获取实际存储数据并返回给客户端。

监控平台,监控平台对Tracker、Nginx、MariaDB实行服务状态监控。

作为优选实例,所述Nginx之间通过Keepalived软件保持集群高可用。

作为优选实例,所述多个MariaDB组成高可用集群。

MogileFS是一个开源的分布式文件系统,用于组建分布式文件集群。

MogileFS服务器端包括MogileFSd和mogstored两个程序。MogileFSd即Tracker,它将一些全局信息保存在数据库里,例如:站点domain,class,host等。mogstored即存储节点Storage Node,默认侦听在7500端口,接受客户端的文件备份请求。在安装完后,要运行mogadm工具将所有的存储节点注册到MogileFSd的数据库里,MogileFSd会对这些节点进行管理和监控。

监控平台包含对Nginx、MogileFS、MariaDB的管理工具,实现服务管理和健康状态监控。

本发明的有益效果是:从文件系统的客户使用的角度来看,它就是一个标准的文件系统,提供了一系列API,由此进行文件或目录的创建、移动、删除,以及对文件的读写等操作;从内部实现来看,分布式的系统则不再和普通文件系统一样负责管理本地磁盘,它的文件内容和目录结构都不是存储在本地磁盘上,而是通过网络传输到远端系统上,并且同一个文件存储不只是在一台机器上,而是在一簇机器上分布式存储,协同提供服务,实现负载均衡和高可用;将请求代理至后端MogileFS服务器集群中,能实现负载均衡的效果,能对后端的tracker和节点进行健康检测。

附图说明

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海菱秀自动化科技有限公司,未经上海菱秀自动化科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811638998.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top