[发明专利]一种批量合并hbase表regions的方法在审
申请号: | 201410427005.2 | 申请日: | 2014-08-27 |
公开(公告)号: | CN104199901A | 公开(公告)日: | 2014-12-10 |
发明(设计)人: | 范莹;于治楼;梁华勇 | 申请(专利权)人: | 浪潮集团有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F9/44 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 姜明 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种批量合并hbase表regions的方法,涉及大数据技术领域,通过获取hbase表的regionname列表,实现导出各个hbase表的regions的名称列表,保存为与表名同名的文本文件;通过修改hbase脚本,添加配置文件路径;通过执行脚本merge.sh,merge.sh脚本轮询每个regions的名称列表,将两个相邻region进行merge,达到批量合并的目的。该方法在大数据平台基础上,将hbase表的大量regions进行批量合并,解决因预分规则不恰当或初始regionsize过小而导致的空region、小region、split过于频繁,以及打开文件数过多等问题,提高了系统的稳定性和应用程序的效率。 | ||
搜索关键词: | 一种 批量 合并 hbase regions 方法 | ||
【主权项】:
一种批量合并hbase表regions的方法,其特征在于, 主要包括三个步骤: 第一步,获取hbase表的region name列表;第二步,修改hbase脚本;第三步是执行脚本merge.sh;通过第一步,导出各个hbase表的regions的名称列表,保存为与表名同名的文本文件,供下一步合并使用;通过第二步修改hbase脚本,添加配置文件路径;通过第三步,执行根据region name列表对region进行合并的脚本merge.sh,merge.sh脚本轮询每个regions的名称列表,将两个相邻region进行merge,完成批量合并。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮集团有限公司;,未经浪潮集团有限公司;许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410427005.2/,转载请声明来源钻瓜专利网。