[发明专利]HBase热点消除方法及系统

说明书

本发明公开了一种HBase热点消除方法及系统，其中该HBase热点消除方法包括：检测集群，将集群中的Region热点加入至热点机器列表；判断热点机器列表包括的Region热点的数量是否为0，若是，则结束流程，若否，则选择一个待消除Region热点；将待消除Region热点拆分成两个Region或者从该集群中选择一不具有Region热点的RegionServer与该待消除Region热点交换；将该待消除Region热点从该热点机器列表中移除。本发明能够自动检测和消除Region热点和RegionServer热点，缩短数据的请求时间，保证了整个系统的正常运行，具有快速高效地优点。

技术领域

本发明涉及互联网大数据领域，尤其涉及一种HBase(一种分布式的、面向列的开源数据库)热点消除方法及系统。

背景技术

HBase表中包括有多个Region，每个Region中都存储一定的数据。集群中的RegionServer可能分配到一个或多个Region。由于每个Region上的数据请求量的不同，可能会出现一个或多个Region热点，所谓Region热点是指请求量超过一第一请求量阈值的Region。这些Region热点的出现，会使得数据的请求时间变长，大大影响整个集群的稳定性和可用性，严重时甚至可能造成系统瘫痪。

目前，HBase并没有Region热点发现及自动消除工具，只能利用自带的split(Java中一种语句)方法将指定的Region进行拆分，但是这种方法需要技术人员手动地设定要拆分的Region，十分麻烦，效率也不高。

发明内容

本发明要解决的技术问题是如何克服现有技术中难以消除HBase中的热点的缺陷，提供一种能够自动消除热点的HBase热点消除方法及系统。

本发明是通过下述技术方案解决上述技术问题的：

本发明提供一种HBase热点消除方法，其特点是，包括：

S₁、设定集群的HBase表中的每一Region的被交换次数的初始值为0；

S₂、检测集群，将集群中的Region热点加入至一热点机器列表，Region热点为请求量超过一第一请求量阈值的Region；

S₃、判断该热点机器列表包括的Region热点的数量是否为0，若是，则结束流程，若否，则执行S₄；

S₄、从该热点机器列表中选择一个Region热点作为待消除Region热点；

S₅、判断该待消除Region热点的被交换次数是否超过一交换阈值，若超过，则执行S₆，若未超过，则执行S₇；

S₆、将该待消除Region热点拆分成两个Region，然后执行S₈；

S₇、从该集群中选择一不具有Region热点的RegionServer，并将该待消除Region热点与被选择的不具有Region热点的RegionServer的Region交换，并更新该待消除Region热点的被交换次数；

S₈、将该待消除Region热点从该热点机器列表中移除，然后执行S₃。