[发明专利]一种同时访问不同集群Hbase的数据库连接方法在审
申请号: | 201611253020.5 | 申请日: | 2016-12-30 |
公开(公告)号: | CN106844535A | 公开(公告)日: | 2017-06-13 |
发明(设计)人: | 李文浩;刘永强;许翔 | 申请(专利权)人: | 南京天谷电气科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 苏州翔远专利代理事务所(普通合伙)32251 | 代理人: | 刘计成 |
地址: | 210000 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 同时 访问 不同 集群 hbase 数据库连接 方法 | ||
技术领域
本发明涉及数据库存储的技术领域,尤其是一种同时访问不同集群Hbase的数据库连接方法。
背景技术
在大数据时代背景下,处理数据都以TB级、PB级来进行计算,传统技术对处理这样数量级的数据已经力不从心,应运而生的就是Hadoop集群和Hbase这样新式的数据库。相比较而言,传统的关系型数据库具有以下缺点:a、关系数据库所采用的二维表格数据模型不能有效地处理多维数据,不能有效处理互联网应用中半结构化和非结构化的海量数据;b、高并发读写的性能低,当关系数据库达到一定规模时,非常容易发生死锁等并发问题,导致其读写性能下降非常严重;c、支撑容量有限;d、数据库的可扩展性和可用性低,当应用系统的用户量和访问量与日俱增的时候,传统关系型数据库却没有办法像Web Server简单地通过添加更多的硬件和服务节点来扩展性能和负载能力。
通常情况访问某集群Hbase,会调用HbaseConfiguration的create方法创建Configuration实例,create方法首先会在classpath下查找Hbase-site.xml文件,将里面的信息解析出来封装到Configuration对象中,若Hbase-site.xml文件不存在,则使用默认的Hbase-core.xml文件,显然该方法获取的是一个集群的Hbase配置文件,无法在需要时同时连接另一个集群的Hbase。因此亟需一种同时访问不同集群Hbase的数据库连接方法。
发明内容
本发明要解决的技术问题是:为了克服Hbase通用连接方法的不足,提供一种同时访问不同集群Hbase的数据库连接方法。
本发明解决其技术问题所采用的技术方案是:一种同时访问不同集群Hbase的数据库连接方法,具体连接步骤如下:
S1:从xml配置文件中获取不同集群Hbase配置文件名称;
S2:创建Configuration实例,调用addResource方法加载不同集群Hbase配置文件;
S3:使用创建的Configuration实例为初始化参数,通过HConnectionManager定义HConnection引用变量;
S4:定义HTableInterface引用变量,对应不同集群Hbase中表,然后即可进行不同集群间Hbase表操作;
S5:调用close方法释放资源。
进一步具体地说,上述技术方案中S1中采用xml格式文件保存不同集群Hbase配置文件名称。
进一步具体地说,上述技术方案中S1中使用DOM解析器读取xml配置文件。
进一步具体地说,上述技术方案中S2中分别创建Configuration实例,各自调用addResource方法加载不同集群Hbase配置文件。
进一步具体地说,上述技术方案中S3中以创建的Configuration实例为初始化参数,定义HConnection引用变量。
进一步具体地说,上述技术方案中S3中通过HConnection变量定义HTableInterface引用变量,对应不同集群Hbase表,从而同时对不同集群Hbase表进行操作。
本发明的有益效果是:该数据库连接方法具有以下优点:
一、通过xml配置文件可以保存多个集群Hbase的配置文件名称,且可以包含绝对路径,xml配置文件又可以通过DOM解析器很方便的解析;
二、通过HConnection构建HTableInterface实现是非常轻量级的,资源是可控,所以每次对Hbase连接池进行访问操作的时候所消耗的资源都很少,并且速度非常快;
三、通过上述方法可以同时访问到多个集群Hbase中的表,并对其进行操作,对于不同集群间数据交互提供了极大的便利。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1是本发明的流程图。
具体实施方式
现在结合附图对本发明作进一步详细的说明。这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
见图1,一种同时访问不同集群Hbase的数据库连接方法,具体连接步骤如下:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京天谷电气科技有限公司,未经南京天谷电气科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611253020.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种滤网可拆卸的多级滤尘装置
- 下一篇:便携式焊接烟气净化装置及净化方法