[发明专利]一种防止HBase中数据误删除的方法及系统

说明书

本发明公开了一种防止HBase中数据误删除的方法，包括：根据用户操作在HDFS目录下设定存储被删除的数据文件的存储文件；设定监控的时间周期，按照所述时间周期，监控Hbase在HDFS目录下的缓存文件夹是否有新增的数据文件；若是，则将新增的所述数据文件存储到所述存储文件下；该方法能够防止HBase中数据误删除；本发明还公开了一种防止HBase中数据误删除的系统。

技术领域

本发明涉及数据安全技术领域，特别涉及一种防止HBase中数据误删除的方法及系统。

背景技术

HBase是一个分布式的、面向列的开源数据库，HBase中的所有数据文件都存储在Hadoop的分布式文件系统HDFS上。HBase支持数据节点的横向扩展，存储量也会依赖于节点的数量。在生产环境中，HBase表的数据量一般都比较大，误删恢复成本比较大。虽然Hadoop的分布式文件系统HDFS有回收站策略，但是对于Hbase的表数据不生效。

一旦做出删除Hbase表的操作之后，Hbase的元数据首先会被删除，然后各个region(数据分区)的数据会被移动到一个叫“archive”的文件夹中，最后Hbase数据的master主线程会在5分钟之后对archive中的数据进行清除。有时候Hbase的使用者做出删除操作之后，并不一定在短时间内认识到数据表已经被删除，当5分钟之后，数据就彻底不能恢复了。因此，如何防止Hbase表误删除，是本领域技术人员需要解决的技术问题。

发明内容

本发明的目的是提供一种防止HBase中数据误删除的方法及系统，能够防止HBase中数据误删除，保证HBase中数据完整性。

为解决上述技术问题，本发明提供一种防止HBase中数据误删除的方法，包括：

根据用户操作在HDFS目录下设定存储被删除的数据文件的存储文件；

设定监控的时间周期，按照所述时间周期，监控Hbase在HDFS目录下的缓存文件夹是否有新增的数据文件；

若有，则将新增的所述数据文件存储到所述存储文件下。

其中，所述设定监控的时间周期，按照所述时间周期，监控Hbase在HDFS目录下的缓存文件夹是否有新增的数据文件，包括：

在定时启动脚本中添加扫描监控缓存文件夹程序，并设定定时启动所述扫描监控缓存文件夹程序的时间周期；

调用所述启动脚本，按照所述时间周期扫描所述缓存文件夹是否有新增的数据文件。

其中，所述将新增的所述数据文件存储到所述存储文件下包括：

将新增的所述数据文件移动到所述存储文件下。

其中，当用户出现HBase中数据误删除时，还包括：

在所述存储文件中确定误删除的数据文件，并将误删除的所述数据文件移动到Hbase在HDFS中相对应的数据目录下；

调用所述Hbase的元数据修复命令对元数据进行修复。

其中，还包括：

当所述存储文件中存储的数据文件的存储空间大于阈值时，提醒用户对所述存储文件中存储的数据文件进行清理。

本发明提供一种防止HBase中数据误删除的系统，包括：

存储模块，用于根据用户操作在HDFS目录下设定存储被删除的数据文件的存储文件；

监控模块，用于设定监控的时间周期，按照所述时间周期，监控Hbase在HDFS目录下的缓存文件夹是否有新增的数据文件；

若有，则触发存储模块将新增的所述数据文件存储到所述存储文件下。