[发明专利]一种数据处理方法、装置、设备及存储介质

权利要求书

1.一种数据处理方法，其特征在于，包括：

获取数据处理指令，并调用与所述数据处理指令对应的组件接口，以确定执行所述数据处理指令的目标组件；其中，所述目标组件为数据导入组件或数据导出组件；

根据目标需求确定相应的对数据进行特定处理的预设操作模块，并对所述预设操作模块的实现进行统一配置，以生成目标配置类；

基于所述目标配置类，将所述预设操作模块接入所述目标组件的脚手架结构中，以得到拼接组件；

开启与所述目标组件对应的目标线程，利用所述拼接组件对所述数据处理指令进行响应。

2.根据权利要求1所述的数据处理方法，其特征在于，所述根据目标需求确定相应的对数据进行特定处理的预设操作模块，包括：

根据目标需求将数据源下载模块、数据源处理模块、逻辑处理模块、结果上报模块确定为预设操作模块。

3.根据权利要求2所述的数据处理方法，其特征在于，所述获取数据处理指令，并调用与所述数据处理指令对应的组件接口，以确定执行所述数据处理指令的目标组件，包括：

获取数据导入指令，并调用数据导入的组件接口；

将数据导入组件确定为执行所述数据导入指令的目标组件。

4.根据权利要求3所述的数据处理方法，其特征在于，所述利用所述拼接组件对所述数据处理指令进行响应，包括：

利用所述数据源下载模块获取待导入数据；

通过所述数据源处理模块对所述待导入数据进行预校验，并解析经过预校验后的所述待导入数据，以得到待导入数据实体；

利用逻辑处理模块导入所述待导入数据实体，并利用结果上报模块上传与所述待导入数据实体对应的导入结果文件。

5.根据权利要求2所述的数据处理方法，其特征在于，所述获取数据处理指令，并调用与所述数据处理指令对应的组件接口，以确定执行所述数据处理指令的目标组件，包括：

获取数据导出指令，并调用数据导出的组件接口；

将数据导出组件确定为执行所述数据导出指令的目标组件。

6.根据权利要求5所述的数据处理方法，其特征在于，所述利用所述拼接组件对所述数据处理指令进行响应，包括：

利用所述数据源下载模块查询待导出数据实体；

通过所述数据源处理模块将所述待导出数据实体转换为结果文件流；

利用逻辑处理模块导出所述结果文件流，并利用结果上报模块将所述结果文件流对应的导入结果文件进行上传。

7.根据权利要求1-6任一项所述的数据处理方法，其特征在于，所述开启与所述目标组件对应的目标线程，包括：

构建并配置线程池；

从所述线程池中开启预设数量个与所述目标组件对应的目标线程，以实现对所述数据处理指令的异步响应。

8.一种数据处理装置，其特征在于，包括：

获取模块，用于获取数据处理指令，并调用与所述数据处理指令对应的组件接口，以确定执行所述数据处理指令的目标组件；其中，所述目标组件为数据导入组件或数据导出组件；

配置模块，用于根据目标需求确定相应的对数据进行特定处理的预设操作模块，并对所述预设操作模块的实现进行统一配置，以生成目标配置类；

拼接模块，用于基于所述目标配置类，将所述预设操作模块接入所述目标组件的脚手架结构中，以得到拼接组件；

处理模块，用于开启与所述目标组件对应的目标线程，利用所述拼接组件对所述数据处理指令进行响应。

9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器；其中所述存储器用于存储计算机程序，所述计算机程序由所述处理器加载并执行以实现如权利要求1至7任一项所述的数据处理方法。

10.一种计算机可读存储介质，其特征在于，用于存储计算机可执行指令，所述计算机可执行指令被处理器加载并执行时，实现如权利要求1至7任一项所述的数据处理方法。