[发明专利]一种下级财政业务数据的采集方法和系统

权利要求书

1.一种下级财政业务数据的采集方法，包括以下步骤：

(1)启动数据抽取装置，根据抽取配置从下级财政业务数据中心抽取需要上传的财政业务数据并打包成XML数据包；抽取配置包括对所要抽取的财政业务数据库、财政业务数据表、财政业务数据以及数据抽取方式的配置；下级财政业务数据中心是指存储业务应用系统运行过程中产生的各类业务数据的数据中心；

(2)将XML数据包转换成消息格式，通过消息中间件将消息存储并转发；

(3)数据接收装置接收消息中间件转发的消息，并将消息转换成XML数据包；

(4)对XML数据包进行解析，并将解析后的财政业务数据存储到上级财政业务数据中心的财政业务数据表中；上级财政业务数据中心是指存储综合查询系统基本数据源的数据中心。

2.如权利要求1所述的一种下级财政业务数据的采集方法，其特征在于：步骤(1)中，所述数据抽取方式包括全量抽取和增量抽取；

所述全量抽取是指一次性将数据表中所有记录抽取出来；所述增量抽取是指对数据表中有变化的数据记录进行抽取，所述变化包括数据记录的增加、修改和删除。

3.如权利要求2所述的一种下级财政业务数据的采集方法，其特征在于：抽取配置时，如果财政业务数据表中配置有提取增量抽取完成后的最后抽取时间的时间戳字段，将时间戳字段所提取的每次增量抽取完成后的最后抽取时间记录在财政业务数据表的增量抽取记录表中。

4.如权利要求2所述的一种下级财政业务数据的采集方法，其特征在于：如果财政业务数据表中不存在时间戳字段的配置，通过设置增量抽取时间戳标识表来记录增量抽取后财政业务数据表的每条数据的最后操作类型和操作时间；操作类型包括数据的增加、修改和删除。

5.如权利要求3或4所述的一种下级财政业务数据的采集方法，其特征在于：在财政业务数据表的抽取配置中通过配置取数条件来抽取相应的财政数据；取数条件指的是数据的过滤条件。

6.如权利要求4所述的一种下级财政业务数据的采集方法，其特征在于：对于一条财政业务数据，如果财政业务数据表中存在该条数据，而增量抽取时间戳标识表中不存在，则该条数据的操作类型为增加操作；

如果增量抽取时间戳标识表中存在该条数据，而财政业务数据表中不存在，则该条数据的操作类型为删除操作；

通过为财政业务数据表设置修改触发器记录操作类型为修改操作的数据。

7.如权利要求2所述的一种下级财政业务数据的采集方法，其特征在于：增量抽取时根据每次抽取数据的数量的设定值进行数据的多次抽取。

8.一种下级财政业务数据的采集系统，包括：

财政业务数据中心：用于存储财政业务数据，包括用于存储业务应用系统运行过程中产生的各类业务数据的下级财政业务数据中心，和用于存储综合查询系统基本数据源的上级财政业务数据中心；

数据抽取装置：用于根据抽取配置从下级财政业务数据中心抽取需要上传的财政业务数据并打包成XML数据包；抽取配置包括对所要抽取的财政业务数据库、财政业务数据表、财政业务数据以及数据抽取方式的配置；

数据发送装置：用于将转化成消息格式的XML数据包发送到消息中间件；

消息中间件装置：用于存储并转发数据发送装置发送来的消息；

数据接收装置：用于接收消息中间件转发的消息；

数据解析装置：用于解析转化成XML数据包的消息，并将解析后的财政业务数据存储到上级财政业务数据中心；

SOA财政总线装置：用于管理各种应用装置和数据格式的转化；应用装置的管理包括数据抽取装置、数据发送装置、数据接收装置和数据解析装置的注册、编排和调度；数据格式的转化包括将XML数据包转化成消息格式和将消息转化成XML数据包。

9.如权利要求8所述的一种下级财政业务数据的采集系统，其特征在于：所述消息中间件装置通过中间件队列的形式存储消息；中间件队列包括下级消息中间件队列和上级消息中间件队列，消息中间件装置在转发消息时将消息从下级消息中间件队列转发到上级消息中间件队列。

10.如权利要求8所述的一种下级财政业务数据的采集系统，其特征在于：数据抽取装置按照设定算法将财政业务数据打包成XML数据包，数据解析装置按照与设定算法的对应算法将XML数据包解析。