[发明专利]一种大数据管理平台的作业任务管理方法

摘要

本发明公开一种大数据管理平台的作业任务管理方法，属于数据管理领域，具体步骤为：①建立大数据管理平台的管理系统，包括Web端统一在线作业任务管理模块，Server端应用程序调度及状态维护模块，Agent端应用程序执行模块；②利用Web端统一在线作业任务管理模块，用户上传作业任务的应用程序，并录入其基本信息；③通过任务API接口进入Server端应用程序调度及状态维护模块，对状态维护命令做统一维护，并发送作业任务状态通知信息；④Agent端应用程序执行模块根据用户提交的配置，执行应用程序，并设定应用程序的执行日志输出，本发明实现在线提交应用程序、自定义配置执行信息和状态变化通知信息，可定制任务执行计划，从而提高大数据管理平台的易用性。

主权项

一种大数据管理平台的作业任务管理方法，其特征是具体步骤为：①建立大数据管理平台的管理系统，主要包括Web端统一在线作业任务管理模块，Server端应用程序调度及状态维护模块，Agent端应用程序执行模块；②利用Web端统一在线作业任务管理模块，用户登录管理平台，提供作业任务的应用程序，上传至集群中，上传时对应用程序的类型、程序大小和命名规范性做校验，不符合规则的拒绝提交；用户进行作业任务基本信息的配置项录入，对用户录入的任务配置项，进行合法性和规范校验，不符合规范的信息拒绝提交；用户对接收状态通知的配置项进行录入；③Web端统一在线作业任务管理模块接收的用户上传的作业任务信息通过任务API接口进入Server端应用程序调度及状态维护模块，应用程序调度及状态维护模块维护应用程序执行状态，Server端通过Agent接口接收Agent端处理的各个流程阶段状态发起的维护命令，对状态维护命令做统一维护，并负责作业任务状态通知信息的发送；④Agent端应用程序执行模块根据用户提交的配置，筛选出当前Agent节点需要执行的应用程序，设定执行计划，并设定应用程序的执行日志输出，将日志内容分类规整，做到可通过前段web端下载查看具体的内容。