[发明专利]一种同时访问不同集群Hbase的数据库连接方法在审

专利信息
申请号: 201611253020.5 申请日: 2016-12-30
公开(公告)号: CN106844535A 公开(公告)日: 2017-06-13
发明(设计)人: 李文浩;刘永强;许翔 申请(专利权)人: 南京天谷电气科技有限公司
主分类号: G06F17/30 分类号: G06F17/30
代理公司: 苏州翔远专利代理事务所(普通合伙)32251 代理人: 刘计成
地址: 210000 江苏省南京市*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 同时 访问 不同 集群 hbase 数据库连接 方法
【说明书】:

技术领域

发明涉及数据库存储的技术领域,尤其是一种同时访问不同集群Hbase的数据库连接方法。

背景技术

在大数据时代背景下,处理数据都以TB级、PB级来进行计算,传统技术对处理这样数量级的数据已经力不从心,应运而生的就是Hadoop集群和Hbase这样新式的数据库。相比较而言,传统的关系型数据库具有以下缺点:a、关系数据库所采用的二维表格数据模型不能有效地处理多维数据,不能有效处理互联网应用中半结构化和非结构化的海量数据;b、高并发读写的性能低,当关系数据库达到一定规模时,非常容易发生死锁等并发问题,导致其读写性能下降非常严重;c、支撑容量有限;d、数据库的可扩展性和可用性低,当应用系统的用户量和访问量与日俱增的时候,传统关系型数据库却没有办法像Web Server简单地通过添加更多的硬件和服务节点来扩展性能和负载能力。

通常情况访问某集群Hbase,会调用HbaseConfiguration的create方法创建Configuration实例,create方法首先会在classpath下查找Hbase-site.xml文件,将里面的信息解析出来封装到Configuration对象中,若Hbase-site.xml文件不存在,则使用默认的Hbase-core.xml文件,显然该方法获取的是一个集群的Hbase配置文件,无法在需要时同时连接另一个集群的Hbase。因此亟需一种同时访问不同集群Hbase的数据库连接方法。

发明内容

本发明要解决的技术问题是:为了克服Hbase通用连接方法的不足,提供一种同时访问不同集群Hbase的数据库连接方法。

本发明解决其技术问题所采用的技术方案是:一种同时访问不同集群Hbase的数据库连接方法,具体连接步骤如下:

S1:从xml配置文件中获取不同集群Hbase配置文件名称;

S2:创建Configuration实例,调用addResource方法加载不同集群Hbase配置文件;

S3:使用创建的Configuration实例为初始化参数,通过HConnectionManager定义HConnection引用变量;

S4:定义HTableInterface引用变量,对应不同集群Hbase中表,然后即可进行不同集群间Hbase表操作;

S5:调用close方法释放资源。

进一步具体地说,上述技术方案中S1中采用xml格式文件保存不同集群Hbase配置文件名称。

进一步具体地说,上述技术方案中S1中使用DOM解析器读取xml配置文件。

进一步具体地说,上述技术方案中S2中分别创建Configuration实例,各自调用addResource方法加载不同集群Hbase配置文件。

进一步具体地说,上述技术方案中S3中以创建的Configuration实例为初始化参数,定义HConnection引用变量。

进一步具体地说,上述技术方案中S3中通过HConnection变量定义HTableInterface引用变量,对应不同集群Hbase表,从而同时对不同集群Hbase表进行操作。

本发明的有益效果是:该数据库连接方法具有以下优点:

一、通过xml配置文件可以保存多个集群Hbase的配置文件名称,且可以包含绝对路径,xml配置文件又可以通过DOM解析器很方便的解析;

二、通过HConnection构建HTableInterface实现是非常轻量级的,资源是可控,所以每次对Hbase连接池进行访问操作的时候所消耗的资源都很少,并且速度非常快;

三、通过上述方法可以同时访问到多个集群Hbase中的表,并对其进行操作,对于不同集群间数据交互提供了极大的便利。

附图说明

下面结合附图和实施例对本发明进一步说明。

图1是本发明的流程图。

具体实施方式

现在结合附图对本发明作进一步详细的说明。这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。

见图1,一种同时访问不同集群Hbase的数据库连接方法,具体连接步骤如下:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京天谷电气科技有限公司,未经南京天谷电气科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201611253020.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top