[发明专利]烟草综合信息数据加工储存平台及数据加工方法

说明书

本发明公开了烟草综合信息数据加工储存平台及数据加工方法。其中，烟草综合信息数据加工储存平台，用于对烟草管理过程中产生的业务数据的抽取、加工和存储。并由、数据导入工具、数据准备区、数据仓库、数据集市、报表数据库、多维分析数据库、挖掘数据库、分析工具、管理控制工具、信息发布系统组成。其中，数据加工方法是对烟草管理过程中产生的业务数据进行导入和处理，包括源数据获取过程；数据据清洗转换过程；数据导入过程。本发明为烟草行业提供了更全面业务数据管理平台，并提供了更合理优质的数据挖掘、数据处理方法、数据检索方法，将海量的数据更精准地呈现给各个单位与相关管理与决策人，利于决策的制定与管理的执行以及精细化管理。

技术领域

本发明具体涉及一种计算机数据处理及存储方法。

背景技术

烟草行业属于国有大型企业单位，有着极具规模化的企业体量，包括极具规模的人员、设备、各办事单位数量，例如：烟草专卖单位、烟草物流单位、财务部等重要单位以及该单位的重要岗位。

同时，烟草行业在管理上也是非常具备规范性，在管理过程中需要做到管理数据质量精准、数据完整、流程通畅、管理层获取管理数据快速的要求。

因此，在管理过程中，需要将大量的管理数据汇报于相关管理单位、管理人员。这些数据包括烟草专卖单位、烟草物流单位、财务部等重要单位以及重要岗位上生成的专卖业务数据、烟草物流业务数据、财务部业务数据，以及其它非结构化数据，如文档、图片等。

但是，现有的烟草数据保留在数据生成单位，仅仅是将该数据生成报表后，进行上报汇总，因此，上一级管理单位或管理人员获得的数据并非是最全面的业务数据，不利于决策的制定与管理的执行以及精细化管理。

因此，烟草行业需要更全面业务数据管理平台，做到让上一级管理单位或相关管理单位或管理人员能直接全面获取到各所属单位业务数据，包括专卖业务数据、烟草物流业务数据、财务部业务数据，以及其它非结构化数据，如文档、图片等。

要做到这一点，需要各级单位、岗位、管理决策部门及人员共享数据各种数据，不仅存放数据的数据库要有足够的物理容量，而且需要更合理优质的数据挖掘、数据处理方法、数据检索方法，将海量的数据更精准地呈现给各个单位与相关管理与决策人，而现有的数据管理系统并无法支撑这一要求。

发明内容

本发明的目的在于克服现有技术的缺点，提供一种烟草综合信息数据加工储存平台，以及烟草综合信息数据加工储存平台的数据加工方法，以获得优质的数据挖掘、数据处理方法、数据检索方法用于处理海量的数据。

为实现上述目的，本发明的烟草综合信息数据加工储存平台，用于对烟草管理过程中产生的业务数据的抽取、加工和存储。并且由以下模块部分组成：

(1)、数据导入工具，用于读取数据源，获得烟草数据，经处理后存到数据仓库内。

(2)、数据准备区，设置在烟草数据进入数据仓库之前，以平面文件及操作型数据存储的形式保存抽取、转换之后的烟草数据。

(3)、数据仓库，用于海量烟草数据存放和支持对海量烟草数据快速检索，采用关系型的E-R模型。

(4)、数据集市，为了特定的应用目的或应用范围，而从数据仓库中独立出来的一部分烟草数据数据。

(5)、报表数据库，为支持用户常用和能够预先获知结构的报表特地设立的数据库。

(6)、多维分析数据库，包括关系型联机分析处理模型、多维联机分析处理模型、混合联机分析处理模型。

(7)、挖掘数据库，采用关系型的存储模型，存储数据挖掘需要和产生的临时烟草数据。

(8)、分析工具，为开发利用数据仓库提供手段。

(9)、管理控制工具，用于安全和特权管理。