[发明专利]一种基于Hadoop的分布式移动基站数据存储系统在审
申请号: | 201910469125.1 | 申请日: | 2019-05-31 |
公开(公告)号: | CN110290179A | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 郭乃网;吴力波;周阳;马戎;施政昱;陈伟;苏运;田英杰;瞿海妮;张琪祁;时志雄;宋岩;庞天宇;沈泉江 | 申请(专利权)人: | 国网上海市电力公司;复旦大学 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F16/182 |
代理公司: | 上海科盛知识产权代理有限公司 31225 | 代理人: | 叶敏华 |
地址: | 200002 上海市浦东新区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据层 数据存储系统 备份服务器 应用服务器 移动基站 存储 核心层 物理层 集群 交换机 分布式协调 依次连接 功能层 兼容性 接口层 索引库 最底层 数据库 服务 | ||
1.一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,该系统包括依次连接的接口层、功能层、数据层和物理层,所述的物理层包括至少一台应用服务器、备份服务器以及核心层交换机,各应用服务器、各备份服务器、数据层分别连接核心层交换机,所述的数据层包括Linux存储集群,该Linux存储集群采用Hadoop集群平台,所述的Hadoop集群平台包括YARN、索引库、HBase数据库、Mysql数据库以及用以进行分布式协调服务的Zookeeper,所述的Hadoop集群平台的最底层设有用以存储所有节点上的文件的HDFS。
2.根据权利要求1所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的Hadoop集群平台为树形结构,该树形结构包括内部节点和叶子节点,所述的内部节点代表一个路由器或核心层交换机,所述的叶子节点代表部署DataNode数据节点的机器,DataNode数据节点用以响应来自HDFS的读写请求,并用于响应来自NameNode名称节点的创建、删除和复制块的命令。
3.根据权利要求2所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的Hadoop集群平台的管理员通过设置参数来指定一个脚本文件,在NameNode名称节点启动成功后自动加载此脚本并且执行该脚本,通过该脚本中的设定将集群中DataNode数据节点的IP翻译成对应的rackname,若没有设置参数,则每个DataNode数据节点的IP会被解析到默认机架,NameNode名称节点用于接受每个DataNode数据节点的定期心跳消息。
4.根据权利要求3所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的Hadoop集群平台中,DataNode每隔一段心跳时间主动发起与NameNode之间的联系,心跳间隔时间通过配置参数设定,且通过配置参数可设定最长时间,若NameNode名称节点发现一个节点超过最长时间后仍未与其取得联系,则认定发现的节点死亡,将该节点标记为DeadNode死亡节点。
5.根据权利要求1所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的Mysql数据库通过Sqoop与HBase数据库实现同步。
6.根据权利要求1所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的接口层采用Java API编程接口。
7.根据权利要求1所述的一种基于Hadoop的分布式移动基站数据存储系统,其特征在于,所述的功能层包括兴趣点属性查询单元、兴趣点空间查询单元、兴趣点管理单元。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国网上海市电力公司;复旦大学,未经国网上海市电力公司;复旦大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910469125.1/1.html,转载请声明来源钻瓜专利网。