[发明专利]一种分布式文件清理方法、装置和系统在审
申请号: | 202111304562.1 | 申请日: | 2021-11-05 |
公开(公告)号: | CN113986867A | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 张艺;张志海;林丹;李俊谦 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/16;G06F16/174 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 赵平;董骁毅 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供了一种分布式文件清理方法、装置和系统,可用于人工智能技术领域,所述方法包括:按照配置的数据生命周期表,对主热集群中分布式文件中的对象进行检查,确定出待处理对象;统计出待处理对象的对象数量;若对象数量在对象总数量中的占比比例大于或等于预设的比例阈值,将分布式文件标记为目标清理文件;根据数据生命周期表和预设的对象状态对应的处理方式,按照处理方式对目标清理文件中的对象进行清理,可以对HDFS文件进行部分删除,释放存储资源,从而能够节约集群存储空间,降低存储成本。 | ||
搜索关键词: | 一种 分布式 文件 清理 方法 装置 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111304562.1/,转载请声明来源钻瓜专利网。