[发明专利]软件系统数据处理方法、装置及计算机可读存储介质

说明书

本发明涉及大数据技术，揭露了一种软件系统数据处理方法，包括：从预设的软件系统中获取原始文件集，将所述原始文件集转换成结构化数据集，并将所述结构化数据集存入关系型数据库中；将所述结构化数据集执行合并抽取操作，得到所述软件系统可识别的文件集，并将所述可识别的文件集上传到所述软件系统中；接收所述用户输入的操作指令，对所述操作指令进行解析处理后得到调度任务；根据所述调度任务，并利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载，从而实现所述软件系统的数据自动化处理。本发明还提出一种软件系统数据处理装置以及一种计算机可读存储介质。本发明实现了软件系统的数据高效处理。

技术领域

本发明涉及大数据技术领域，尤其涉及一种基于软件系统的数据处理方法、装置及计算机可读存储介质。

背景技术

现有的精算软件系统，如prophet软件系统，需要人工的调度和操作，跟外界的系统无法直接对接和融合，犹如一个数据孤岛，数据进不去，也出不来，都需要通过人工的方式下载成txt或者csv格式数据，然后进行数据的上传和下载。另外如果遇到数据量大的情况，需要人工一直盯着和查看软件运行模型的进度，十分的不灵活且效率低下。

发明内容

本发明提供一种软件系统数据处理方法、装置及计算机可读存储介质，其主要目的在于给用户提供一种软件系统的数据处理的技术方案。

为实现上述目的，本发明提供的一种软件系统数据处理方法，包括：

从预设的软件系统中获取原始文件集，将所述原始文件集转换成结构化数据集后存入关系型数据库中；

将所述结构化数据集执行合并抽取操作，得到所述软件系统可识别的文件集，并将所述可识别的文件集上传到所述软件系统中；

接收所述用户输入的操作指令，对所述操作指令进行解析处理后得到调度任务；

根据所述调度任务，并利用预先创建的应用调度任务平台对所述软件系统中的可识别文件集进行上传和/或下载，从而实现所述软件系统的数据自动化处理。

可选地，所述将所述原始文件集转换成结构化数据集包括：

通过预设的工具将所述原始文件集转换成需求文档集，对所述需求文档集进行预处理操作得到文档配置表集，将所述文档配置表集进行数据映射得到所述结构化数据集。

可选地，所述对所述需求文档集进行预处理操作得到文档配置表集包括：

根据所述需求文档集中的需求文档的交易类型对所述需求文档集进行模糊查找，得到相同类型的需求文档集，利用暴力匹配算法对所述相同类型的需求文档集进行去重操作，将去重后的所述需求文档集按数据表的形式进行配置得到所述文档配置表集。

可选地，所述合并抽取操作包括：

对所述结构化数据集进行汇总处理后得到汇总数据集，通过位数取余法对所述汇总数据集进行多线程任务拆分，得到拆分任务数据集，采用数据仓库工具将所述拆分任务数据集转换成所述软件系统可识别的文件集。

可选地，所述解析处理包括：

对所述用户输入的操作指令进行指令类别识别，并对类别识别后的所述操作指令进行指令还原，得到密文数据域，获取所述密文数据域中指令的操作对象和处理方式，从而得到所述调度任务，完成所述解析处理。

此外，为实现上述目的，本发明还提供一种软件系统数据处理装置，该装置包括存储器和处理器，所述存储器中存储有可在所述处理器上运行的软件系统数据处理程序，所述软件系统数据处理程序被所述处理器执行时实现如下步骤：

从预设的软件系统中获取原始文件集，将所述原始文件集转换成结构化数据集后存入关系型数据库中；