[发明专利]异构系统间数据升迁系统和方法

权利要求书

1.一种异构系统间数据升迁系统，其特征在于，包括动态分页控制器、升迁方式管理器、升迁核心处理器和升迁日志管理器；

所述动态分页控制器：采用动态二次分页对数据进行读取；

所述升迁方式管理器：选择每次升迁需要使用的升迁方式，并根据新旧系统的配置情况选择同步还是异步升迁，从而生成调度配置文件；

所述升迁核心处理器：根据升迁方式管理器生成的调度配置文件完成数据的处理；

所述升迁日志管理器：收集每次升迁操作的关键日志数据；

所述动态分页控制器采用的动态二次分页具体为：

在一次分页时先将需要升迁的业务单据的所有表头主键ID存储到一张临时表中，再从临时表中分批读取一定数量的主键ID到内存中，在二次分页时，直接从内存中分批读取已缓存的主键ID，利用读取的主键ID从旧数据库中将实际业务数据读取到内存中。

2.根据权利要求1所述的异构系统间数据升迁系统，其特征在于，上述从内存中分批读取已缓存的主键ID中，读取的主键ID数量是通过分析实际业务数据量动态计算后产生的。

3.根据权利要求2所述的异构系统间数据升迁系统，其特征在于，升迁方式管理器管理的升迁方式，包括：

一次升迁：即升迁系统一次性将所有旧系统数据全部升迁到新系统中；

多次升迁：即将整体的升迁时间段拆分，根据拆分的升迁时间段多次进行数据升迁。

4.根据权利要求3所述的异构系统间数据升迁系统，其特征在于，所述多次升迁，包括多次新增升迁和多次覆盖升迁，

所述多次新增升迁：即指定时间范围内，新系统的数据库中所有数据都是从旧系统中新增的；

所述多次覆盖升迁：即指定时间范围内针对已升迁过的历史单据进行同步更新，保证新旧系统数据的一致性。

5.根据权利要求2所述的异构系统间数据升迁系统，其特征在于，所述升迁核心处理器，包括：

数据查询单元：通过读取需要升迁的业务单据的数据查询配置文件自动生成查询的sql语句，根据数据库动态分页中读取的具体主键ID，读取旧数据库中的业务单据明细，并将读取的数据传输给数据转换单元；

数据转换单元：通过旧系统单据表和新系统单据表各字段的映射关系表，将接收的数据查询单元的数据转换成新系统可识别的数据结构，以便充分利用新系统已开发的各种应用代码；

数据翻译单元：接收数据转换单元的数据，将转换后的数据中档案字段ID翻译成新系统的档案主键ID；

数据处理单元：对数据翻译单元处理后的数据中进行后台字段填充并校验数据的正确性；

数据保存单元：对数据处理单元处理后的数据进行分类保存。

6.根据权利要求5所述的异构系统间数据升迁系统，其特征在于，还包括：预警和修复单元：当数据翻译单元将档案字段ID翻译成新系统的档案主键ID前需要对旧系统中单据的档案字段进行分析，当旧系统中记录的档案字段有误时，进行异常数据预警和修复。

7.根据权利要求5所述的异构系统间数据升迁系统，其特征在于，所述数据转换单元中，旧系统单据表和新系统单据表各字段的映射关系表中的映射关系表为EXCEL表格。

8.一种异构系统间数据升迁方法，其特征在于，包括：

采用动态二次分页对数据进行读取；

选择每次升迁需要使用的升迁方式，并根据新旧系统的配置情况选择同步还是异步升迁，从而生成调度配置文件；

根据生成的调度配置文件完成数据的升迁处理；

收集每次升迁操作的关键日志数据；

所述动态二次分页具体为：

在一次分页时先将需要升迁的业务单据的所有表头主键ID存储到一张临时表中，再从临时表中分批读取一定数量的主键ID到内存中，在二次分页时，直接从内存中分批读取已缓存的主键ID，其中，每次读取的已缓存的主键ID的数量是根据分析实际业务数据量动态计算，利用读取的主键ID从旧数据库中将实际业务数据读取到内存中。