[发明专利]一种防止HBase中数据误删除的方法及系统有效
| 申请号: | 201510796233.1 | 申请日: | 2015-11-18 |
| 公开(公告)号: | CN105243340B | 公开(公告)日: | 2018-12-07 |
| 发明(设计)人: | 房体盈 | 申请(专利权)人: | 浪潮(北京)电子信息产业有限公司 |
| 主分类号: | G06F21/64 | 分类号: | G06F21/64;G06F17/30 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
| 地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 防止 hbase 数据 删除 方法 系统 | ||
1.一种防止HBase中数据误删除的方法,其特征在于,包括:
根据用户操作在HDFS目录下设定存储被删除的数据文件的存储文件;
在定时启动脚本中添加扫描监控缓存文件夹程序,并设定定时启动所述扫描监控缓存文件夹程序的时间周期;其中,在shell指令中设置所述扫描监控缓存文件夹程序以及执行所述扫描监控缓存文件夹程序;在crontab配置文件中添加定时调用所述shell指令任务,设置定时调用所述shell指令的时间周期,刷新crontab的配置;
调用所述定时启动脚本,按照所述时间周期扫描所述缓存文件夹是否有新增的数据文件;其中,所述缓存文件夹存储被删除的数据文件,并在5分钟之后对所述数据文件进行清除;
若有,则将新增的所述数据文件存储到所述存储文件下;
当用户出现HBase中数据误删除时,在所述存储文件中确定误删除的数据文件,并将误删除的所述数据文件移动到Hbase在HDFS中相对应的数据目录下;
调用所述Hbase的元数据修复命令对元数据进行修复。
2.如权利要求1所述的方法,其特征在于,所述将新增的所述数据文件存储到所述存储文件下包括:
将新增的所述数据文件移动到所述存储文件下。
3.如权利要求1或2所述的方法,其特征在于,还包括:
当所述存储文件中存储的数据文件的存储空间大于阈值时,提醒用户对所述存储文件中存储的数据文件进行清理。
4.一种防止HBase中数据误删除的系统,其特征在于,包括:
存储模块,用于根据用户操作在HDFS目录下设定存储被删除的数据文件的存储文件;
监控模块,用于在定时启动脚本中添加扫描监控缓存文件夹程序,并设定定时启动所述扫描监控缓存文件夹程序的时间周期;其中,在shell指令中设置所述扫描监控缓存文件夹程序以及执行所述扫描监控缓存文件夹程序;在crontab配置文件中添加定时调用所述shell指令任务,设置定时调用所述shell指令的时间周期,刷新crontab的配置;调用所述定时启动脚本,按照所述时间周期扫描所述缓存文件夹是否有新增的数据文件;其中,所述缓存文件夹存储被删除的数据文件,并在5分钟之后对所述数据文件进行清除;若有,则触发存储模块将新增的所述数据文件存储到所述存储文件下;
移动模块,用于当用户出现HBase中数据误删除时,在所述存储文件中确定误删除的数据文件,并将误删除的所述数据文件移动到Hbase在HDFS中相对应的数据目录下;
修复模块,用于调用所述Hbase的元数据修复命令对元数据进行修复。
5.如权利要求4所述的系统,其特征在于,所述存储模块具体用于:
将新增的所述数据文件移动到所述存储文件下。
6.如权利要求4或5所述的系统,其特征在于,还包括:
提醒模块,用于当所述存储文件中存储的数据文件的存储空间大于阈值时,提醒用户对所述存储文件中存储的数据文件进行清理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮(北京)电子信息产业有限公司,未经浪潮(北京)电子信息产业有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510796233.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:新型喷药器
- 下一篇:3G智能化自动虫情识别测报系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





