[发明专利]一种数据仓库优化方法和装置

说明书

本发明公开了一种数据仓库优化方法和装置，包括回收暂存模块、优化分析模块和存储调配模块，所述误删恢复模块用于恢复数据仓库组中误删的数据文件，并将恢复后的数据文件重新存储至数据仓库组中；所述回收暂存模块用于存放数据仓库组删除后的数据文件和数据仓库组中存放超时的数据文件，所述计时单元用于对回收暂存模块中存放的数据文件进行计时，并将计时信息发送至定时清理单元，所述定时清理单元接收计时单元发送的计时信息，并依据计时信息对回收暂存模块中达到时间阈值的数据文件进行定时清理，本发明在数据文件存储时，根据数据文件的数量、内存大小和上传时间及时调用适配存储空间的数据仓库，且数据仓库自身可以进行清理和瘦身。

技术领域

本发明属于数据仓库应用领域，涉及数据仓库优化技术，具体是一种数据仓库优化方法和装置。

背景技术

数据仓库是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。 为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。在当前信息技术与数据智能大环境下，数据仓库在软硬件领域、Internet 和企业内部网解决方案以及数据库方面提供了许多经济高效的计算资源，可以保存极大量的数据供分析使用，且允许使用多种数据访问技术。

数据仓库在进行数据文件存储时，无法根据上传文件的数量和内存大小及时调用相应存储空间的数据仓库；数据仓库随着长时间运营具备一定规模，对数据仓库的要求就更加严苛，一旦数据仓库无法承受工作压力，将直接造成系统和各种业务的瘫痪，其损失也会是非常巨大的，而且目前的企业数据仓库参数的调整仍然主要依靠人工操作，难免出现凭经验设置的弊端，同时数据仓库的清理和瘦身也主要是根据应用生命周期进行清理，当数据仓库非常庞大时，各个对象之间的关系变得非常复杂、冗余和不透明，利用现有技术进行数据仓库瘦身无法将冗余、无用对象一次全部清理；为此，我们提出一种数据仓库优化方法和装置。

发明内容

针对现有技术存在的不足，本发明目的是提供一种数据仓库优化方法和装置。

本发明所要解决的技术问题为：

数据仓库在进行数据文件存储时，无法根据上传文件的数量和内存大小及时调用相应存储空间的数据仓库；数据仓库随着长时间运营具备一定规模，对数据仓库的要求就更加严苛，一旦数据仓库无法承受工作压力，将直接造成系统和各种业务的瘫痪，其损失也会是非常巨大的，而且目前的企业数据仓库参数的调整仍然主要依靠人工操作，难免出现凭经验设置的弊端，同时数据仓库的清理和瘦身也主要是根据应用生命周期进行清理，当数据仓库非常庞大时，各个对象之间的关系变得非常复杂、冗余和不透明，利用现有技术进行数据仓库瘦身无法将冗余、无用对象一次全部清理。

本发明的目的可以通过以下技术方案实现：

一种数据仓库优化装置，包括数据仓库组、数据采集模块、用户终端、误删恢复模块、回收暂存模块、优化分析模块和存储调配模块；

若干个用户终端用于使用人员通过个人终端上传数据文件至数据仓库组，若干个用户终端与数据仓库组双向数据连接；所述数据采集模块用于获取数据仓库组和数据文件的基本信息，并将数据仓库组和数据文件的基本信息发送至优化分析模块；

所述误删恢复模块用于恢复数据仓库组中误删的数据文件，并将恢复后的数据文件重新存储至数据仓库组中；所述回收暂存模块用于存放数据仓库组删除后的数据文件和数据仓库组中存放超时的数据文件，所述回收暂存模块包括计时单元和定时清理单元，所述计时单元用于对回收暂存模块中存放的数据文件进行计时，并将计时信息发送至定时清理单元，所述定时清理单元用于接收计时单元发送的计时信息，并依据计时信息对回收暂存模块中达到时间阈值的数据文件进行定时清理，定时清理的工作过程具体如下：

W1：当数据文件i从数据仓库组中回收至回收暂存模块时，将系统当前时间记为数据文件的回收起始时间T0i，同时计时单元开始对回收暂存模块中存放的数据文件进行计时，i=1，2，……，n；