[发明专利]一种数据库间的数据迁移方法及系统

说明书

本发明公开一种数据库间的数据迁移方法及系统。本发明的方法包括步骤：将源数据库的待导出数据以excel格式文件的形式导出；基于前端数据解析工具对导出的excel格式文件进行解析，得到解析数据；对解析数据进行预处理；将预处理后的数据以excel格式文件的形式导出，得到待导入至目标数据库的excel格式文件；判断待导入至目标数据库的excel格式文件内的每份数据是否均符合预定的导入数据标准；若是，将该excel格式文件导入目标数据库。本发明的系统包括对应实现上述每个方法步骤的功能模块。根据本发明，能够解决现有数据库间的数据迁移方法无法满足解析数据的前端编辑需求以及占用后端资源过多的问题。

技术领域

本发明属于数据迁移领域，更具体地，涉及一种数据库间的数据迁移方法及系统。

背景技术

在当今税务信息化管理中，经常需要多个税务应用系统之间进行协作以实现对税务数据的有效管理，由此引申出税务应用系统间的数据迁移问题，而税务应用系统间的数据迁移实质上是数据库间的数据迁移。

现有数据库间的数据迁移流程主要包括数据导出、数据解析、数据处理和数据导入等环节。其中，最为重要的数据解析环节通常采用POI和easyExcel等后端数据解析工具实现。然而，采用后端数据解析工具进行数据解析却存在以下两方面问题：

一、从源数据库导出的excel数据直接解析到目标数据库中，当有在前端对解析后的数据进行编辑的需求时，用户无法对解析后的数据进行编辑，灵活性差。

二、后端数据解析工具占用过多的后端服务器资源，造成后端资源紧张，而前端资源利用率较低。

发明内容

本发明的目的在于解决现有数据库间的数据迁移方法因采用后端数据解析工具实现数据解析而导致无法满足解析数据的前端编辑需求以及占用后端资源过多的问题。

为了实现上述目的，本发明提供一种数据库间的数据迁移方法及系统。

根据本发明的第一方面，提供了一种数据库间的数据迁移方法，该方法包括以下步骤：

将源数据库的待导出数据以excel格式文件的形式导出；

基于前端数据解析工具对导出的excel格式文件进行解析，得到解析数据；

对所述解析数据进行预处理；

将预处理后的数据以excel格式文件的形式导出，得到待导入至目标数据库的excel格式文件；

判断所述待导入至目标数据库的excel格式文件内的每份数据是否均符合预定的导入数据标准，若是，将该excel格式文件导入所述目标数据库。

作为优选的是，所述源数据库的待导出数据被分布式地保存至预定数量的excel格式文件中。

作为优选的是，所述前端数据解析工具为js-xlsx库，所述解析数据以js格式文件的形式呈现。

作为优选的是，所述对所述解析数据进行预处理的步骤，具体为：

根据预定的数据格式校验规则对所述解析数据进行校验，基于预定的数据格式修改程序或数据格式修改工具库对未通过校验的数据进行修改。

作为优选的是，所述将预处理后的数据以excel格式文件的形式导出的步骤基于预定的数据格式转换程度或数据格式转换工具库实现。

作为优选的是，所述判断所述待导入至目标数据库的excel格式文件内的每份数据是否均符合预定的导入数据标准的步骤，还包括：

若否，将不符合所述导入数据标准的数据以错误数据展示列表的形式呈现，并对所述错误数据进行修改。

作为优选的是，所述错误数据的修改方式包括在线修改和本地修改；