[发明专利]文件处理方法、装置、存储介质及计算机设备有效
申请号: | 201910116009.1 | 申请日: | 2019-02-15 |
公开(公告)号: | CN109902067B | 公开(公告)日: | 2020-11-27 |
发明(设计)人: | 郑艳涛;周一帆;庞少强 | 申请(专利权)人: | 杭州数梦工场科技有限公司 |
主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F16/16 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张润 |
地址: | 310024 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文件 处理 方法 装置 存储 介质 计算机 设备 | ||
1.一种文件处理方法,其特征在于,所述文件为数据仓库工具中的文件,所述数据仓库工具包括目标类型的节点,所述方法包括以下步骤:
获取所述目标类型的节点所产生的镜像文件;
结合所述数据仓库工具的目录信息,对所述镜像文件进行解析得到所述镜像文件所属的原始文件的信息;
根据所述原始文件的信息,结合预设规则对所述原始文件进行合并处理;
所述信息包括:数量和所占用存储空间的大小,所述结合所述数据仓库工具的目录信息,对所述镜像文件进行解析得到所述镜像文件所属的原始文件的信息,包括:
结合所述数据仓库工具的目录信息,确定所述数据仓库工具的多个数据库表和多个分区中,与各所述数据库表对应的第一原始文件的信息,以及与各所述分区对应的第二原始文件的信息。
2.如权利要求1所述的文件处理方法,其特征在于,在所述获取所述目标类型的节点所对应的镜像文件之前,还包括:
在所述数据仓库工具运行过程中,将所述目标类型的节点所产生的镜像文件存储至本地存储设备中。
3.如权利要求1所述的文件处理方法,其特征在于,所述根据所述原始文件的信息,结合预设规则对所述原始文件进行合并处理,包括:
根据各所述第一原始文件的信息,确定各所述数据库表对应的,所述第一原始文件所占用存储空间的大小的第一平均值,并确定各所述分区对应的,所述第二原始文件所占用存储空间的大小的第二平均值;
根据所述第一平均值、所述第二平均值,所述第一原始文件的数量,以及所述第二原始文件的数量,结合预设规则对所述原始文件进行合并处理。
4.如权利要求3所述的文件处理方法,其特征在于,所述根据所述第一平均值、所述第二平均值,所述第一原始文件的数量,以及所述第二原始文件的数量,结合预设规则对所述原始文件进行合并处理,包括:
在所述第一平均值或者第二平均值,小于或者等于第一预设阈值时,对所述第一原始文件或者第二原始文件进行合并处理;和/或,
在所述第一原始文件的数量或者所述第二原始文件的数量,大于第二预设阈值时,对所述第一原始文件或者第二原始文件进行合并处理。
5.一种文件处理装置,其特征在于,所述文件为数据仓库工具中的文件,所述数据仓库工具包括目标类型的节点,所述装置包括:
获取模块,用于获取所述目标类型的节点所产生的镜像文件;
解析模块,用于结合所述数据仓库工具的目录信息,对所述镜像文件进行解析得到所述镜像文件所属的原始文件的信息;
合并处理模块,用于根据所述原始文件的信息,结合预设规则对所述原始文件进行合并处理;
所述信息包括:数量和所占用存储空间的大小,所述解析模块,具体用于:
结合所述数据仓库工具的目录信息,确定所述数据仓库工具的多个数据库表和多个分区中,与各所述数据库表对应的第一原始文件的信息,以及与各所述分区对应的第二原始文件的信息。
6.如权利要求5所述的文件处理装置,其特征在于,还包括:
存储模块,用于在所述数据仓库工具运行过程中,将所述目标类型的节点所产生的镜像文件存储至本地存储设备中。
7.如权利要求6所述的文件处理装置,其特征在于,所述合并处理模块,具体用于:
根据各所述第一原始文件的信息,确定各所述数据库表对应的,所述第一原始文件所占用存储空间的大小的第一平均值,并确定各所述分区对应的,所述第二原始文件所占用存储空间的大小的第二平均值;
根据所述第一平均值、所述第二平均值,所述第一原始文件的数量,以及所述第二原始文件的数量,结合预设规则对所述原始文件进行合并处理。
8.如权利要求7所述的文件处理装置,其特征在于,所述合并处理模块,具体用于:
在所述第一平均值或者第二平均值,小于或者等于第一预设阈值时,对所述第一原始文件或者第二原始文件进行合并处理;和/或,
在所述第一原始文件的数量或者所述第二原始文件的数量,大于第二预设阈值时,对所述第一原始文件或者第二原始文件进行合并处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州数梦工场科技有限公司,未经杭州数梦工场科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910116009.1/1.html,转载请声明来源钻瓜专利网。