[发明专利]分布式数据存储与访问装置在审
申请号: | 201811638998.2 | 申请日: | 2018-12-29 |
公开(公告)号: | CN111382135A | 公开(公告)日: | 2020-07-07 |
发明(设计)人: | 陈萌 | 申请(专利权)人: | 上海菱秀自动化科技有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/172;G06F16/17;G06F9/50;G06F11/30 |
代理公司: | 上海浙晟知识产权代理事务所(普通合伙) 31345 | 代理人: | 杨小双 |
地址: | 200000 上海市普陀*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 数据 存储 访问 装置 | ||
本发明公开了一种分布式数据存储与访问装置,属于数据存储装置技术领域。它包括:域名服务器DNS Server,反向代理服务器Nginx,文件自动备份组件MogileFS,数据库管理系统MariaDB,监控平台。将请求代理至后端MogileFS服务器集群中,能实现负载均衡的效果,能对后端的tracker和节点进行健康检测。
技术领域
本发明涉及一种分布式数据存储与访问装置,属于数据存储装置技术领域。
背景技术
目前,随着信息数据处理需求的日益增长以及不同领域的业务种类的日益丰富,海量数据的存储及查询变得越来越重要。由于随着业务种类的日益丰富,需要存储的数据信息也越来越多,同时基于用户请求的数据操作也越来越频繁,从而需要经常对数据信息的存储进行动态的调整。
传统存储在面对海量数据存储表现出诸多局限,例如:纵向扩展受阵列空间限制,横向扩展受交换设备限制,节点受文件系统限制等。而分布式存储的出现在一定程度上有效的缓解了这一问题。
发明内容
本发明所要解决的技术问题在于:提供一种分布式数据存储与访问装置,它解决了传统存储在面对海量数据存储以上诸多局限的问题。
本发明所要解决的技术问题采取以下技术方案来实现:
分布式数据存储与访问装置,它包括:
域名服务器DNS Server,用户通过客户端向DNS Server发送用户请求;
反向代理服务器Nginx,Nginx接收DNS Server发出的用户请求;
文件自动备份组件MogileFS,MogileFS包括调度器Tracker和存储节点StorageNode两部分,Nginx通过调度将用户请求转达给其中一个MogileFS的Tracker,Tracker接收到用户请求向Storage Node获取存储位置并返回给Nginx;
数据库管理系统MariaDB:Nginx接到存储位置再到MariaDB的存储上获取实际存储数据并返回给客户端。
监控平台,监控平台对Tracker、Nginx、MariaDB实行服务状态监控。
作为优选实例,所述Nginx之间通过Keepalived软件保持集群高可用。
作为优选实例,所述多个MariaDB组成高可用集群。
MogileFS是一个开源的分布式文件系统,用于组建分布式文件集群。
MogileFS服务器端包括MogileFSd和mogstored两个程序。MogileFSd即Tracker,它将一些全局信息保存在数据库里,例如:站点domain,class,host等。mogstored即存储节点Storage Node,默认侦听在7500端口,接受客户端的文件备份请求。在安装完后,要运行mogadm工具将所有的存储节点注册到MogileFSd的数据库里,MogileFSd会对这些节点进行管理和监控。
监控平台包含对Nginx、MogileFS、MariaDB的管理工具,实现服务管理和健康状态监控。
本发明的有益效果是:从文件系统的客户使用的角度来看,它就是一个标准的文件系统,提供了一系列API,由此进行文件或目录的创建、移动、删除,以及对文件的读写等操作;从内部实现来看,分布式的系统则不再和普通文件系统一样负责管理本地磁盘,它的文件内容和目录结构都不是存储在本地磁盘上,而是通过网络传输到远端系统上,并且同一个文件存储不只是在一台机器上,而是在一簇机器上分布式存储,协同提供服务,实现负载均衡和高可用;将请求代理至后端MogileFS服务器集群中,能实现负载均衡的效果,能对后端的tracker和节点进行健康检测。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海菱秀自动化科技有限公司,未经上海菱秀自动化科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811638998.2/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种云桌面虚机实现3D能力的方法和系统
- 下一篇:气体处理设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置