[发明专利]海量数据的异步导出方法

说明书

 

【技术领域】

本发明涉及一种海量数据的异步导出方法，特别是一种不影响原系统访问的海量数据的异步导出方法。

【背景技术】

以前系统中导出数据只能小数据量的导出且在同一系统中，如需大数据量数据，需要多次导出，并将数据合在一起查看，非常的不方便；系统一执行大数据量的导出整个系统就类似宕机状态，非常慢，用户需要等待该数据导出完成之后才能操作其它功能，其它人员使用系统也很慢，几乎不能使用，甚至执行大数据量导出的人员的个人机器操作也很慢，甚至无法使用。

【发明内容】

本发明的主要目的在于提供一种不影响原系统访问的海量数据的异步导出方法。

本发明提供一种海量数据的异步导出方法，包括以下步骤：

（1）原系统接收查询条件并将查询条件记录保存到数据库中，其中，查询条件记录的状态为未导出查询条件记录；

（2）异步系统查询数据库中是否有未导出查询条件记录；

（3）若异步系统查询到有未导出数据状态的查询条件记录时，分批次执行导出数据的操作，且导出数据后的查询条件记录的状态为已导出查询条件记录；

（4）异步系统判断导出数据操作是否完成；

（5）异步系统判断导出数据操作已完成时，通知原系统。

特别地，步骤（3）具体包括以下步骤；

（3-1）将未导出数据状态的查询条件记录转成主条件对象记录；

（3-2）将主条件对象记录添加到待导出数据队列中；

（3-3）分批次执行待导出数据队列中的记录。

特别地，若异步系统查询到无未导出数据状态的查询条件记录时，间隔预定时间后继续执行步骤（2）。

特别地，若步骤（4）中导出数据操作未完成时，返回执行步骤（2）。

特别地，步骤（5）中通知原系统的方式为发送邮件。

特别地，步骤（3-3）中执行导出数据的操作具体包括以下步骤；

（3-3-1）导出数据时，查询条件记录的状态为导出中查询条件记录；

（3-3-2）将主条件对象转成具体条件对象；

（3-3-3）调用导出数据方法导出具体条件对象的数据；

（3-3-4）根据具体条件对象的数据生成所需格式的文档；

（3-3-5）于原系统上显示下载窗口。

特别地，步骤（3-3-3）还包括：判断导出具体条件对象的数据是否成功，若成功导出具体条件对象的数据，将查询条件记录的状态设置为已导出查询条件记录，删除数据库中的查询条件记录，并发送成功信息通知原系统；若未能成功导出具体条件对象的数据，将查询条件记录的状态设置为失败的查询条件记录，且发送失败信息通知原系统。

特别地，步骤（3-3-4）还包括：文檔生成后，压缩成zip格式的压缩文档，并删除原文档。 

与现有技术相比较，本发明中执行数据导出的系统为异步系统，而非原系统，因此，在执行数据导出过程中，并不影响原系统访问。

为对本发明的目的、构造特征及其功能有进一步的了解，兹配合附图详细说明如下：

【附图说明】

图1为本发明海量数据的异步导出方法的主流程图。

图2为图1中步骤30的具体流程图。

图3为执行待导出数据队列中的一条记录的具体流程图。

【具体实施方式】

请参阅图1所示，本发明海量数据的异步导出方法包括以下步骤：

步骤10：原系统接收查询条件并将查询条件记录保存到数据库中，其中，查询条件记录的状态为未导出查询条件记录；

步骤20：异步系统查询数据库中是否有未导出查询条件记录；若异步系统查询到有未导出数据状态的查询条件记录时，执行步骤30；若异步系统查询到无未导出数据状态的查询条件记录时，间隔预定时间后继续执行步骤20；

步骤30：分批次执行导出数据的操作，且导出数据后的查询条件记录的状态为已导出查询条件记录；于本实施例中，异步系统可设定一批次同时执行若干条未导出数据状态的查询条件记录；

步骤40：异步系统判断导出数据操作是否完成；若完成，则执行步骤50；若未完成，返回执行步骤20；

步骤50：通知原系统，于本实施例中，通知原系统的方式为发送邮件。

请参阅图1及图2所示，其中，步骤30具体包括以下步骤：

步骤31：将未导出数据状态的查询条件记录转成主条件对象记录；

步骤32：将主条件对象记录添加到待导出数据队列中；