[发明专利]一种异常任务处理方法、系统、设备以及介质

说明书

本发明公开了一种异常任务处理方法，包括以下步骤：响应于检测到异常状态的任务，确定所述异常状态的任务已执行的百分比；获取所述异常状态的任务对应的配置文件；根据所述配置文件读取到所述已执行的百分比对应的多个清理指令；利用所述多个清理指令进行环境初始化以重新执行所述异常状态的任务。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提供的方案在任务重新加载之前，先通过维护的任务配置文件中读取到该任务异常时进度对应的清理指令，通过执行这些指令进行初始化，然后重新执行任务，防止出现指令重复执行等引入未知异常。

技术领域

本发明涉及任务处理领域，具体涉及一种异常任务处理方法、系统、设备以及存储介质。

背景技术

分布式存储集群系统一般包含多台存储服务器(Server)，这些服务器组成一个集群统一对外提供服务，文中也将服务器用“节点”表示，分布式集群一般都有其界面管理系统，包含客户端(Client)和服务端(Server)，管理员可通过登录管理系统界面对集群进行设置操作，由于某些操作比较耗时，比如创建存储池、节点扩容等操作需要异步执行，故一般放到任务中异步进行，管理界面上可以查询任务进度。故管理系统需要对任务进行调度，传统的任务的调度过程：管理员通过管理界面下发创建操作(这里用节点扩容举例)请求，界面通过https请求将设置消息下发到管理系统服务端，服务端首先将任务记录到数据库中(可以通过任务id唯一标识)，然后将具体的执行步骤提交给任务执行模块(Task_Exec)，由它去执行实际任务。传统任务管理在管理节点server端服务出现异常时，正在执行的任务由于服务异常而被终止，并且在服务恢复正常后无法自动重新拉起，需要管理员在管理平台重新发起任务。故可靠性和可维护性需要优化和完善。

发明内容

有鉴于此，为了克服上述问题的至少一个方面，本发明实施例提出一种异常任务处理方法，包括以下步骤：

响应于检测到异常状态的任务，确定所述异常状态的任务已执行的百分比；

获取所述异常状态的任务对应的配置文件；

根据所述配置文件读取到所述已执行的百分比对应的多个清理指令；

利用所述多个清理指令进行环境初始化以重新执行所述异常状态的任务。

在一些实施例中，方法进一步包括：预先将任务执行百分比对应的操作指令与清理指令写入所述配置文件；

确定所述异常任务已执行的百分比包括：获取所述异常任务最后一次执行的操作指令，根据所述最后一次执行的操作指令在所述配置文件中确定对应的所述已执行的百分比。

在一些实施例中，响应于检测到异常状态的任务，确定所述异常状态的任务已执行的百分比，进一步包括：

每隔第一预设时间段更新并记录每一个任务的心跳检测时间；

每隔第二预设时间段查询所述每一个任务当前记录的心跳检测时间；

获取当前时间，并根据所述当前时间、所述当前记录的心跳检测时间以及所述第二预设时间段判断任务是否异常。

在一些实施例中，根据所述当前时间、所述当前记录的心跳检测时间以及所述第二预设时间段判断任务是否异常，进一步包括：

判断查询到的所述当前记录的心跳检测时间与当前时间的差值是否大于所述第二预设时间段；

响应于所述当前记录的心跳检测时间与当前时间的差值大于所述第二预设时间段，将对应的任务标记为准异常状态。

在一些实施例中，还包括：

响应于检测到准异常状态的任务的所述当前记录的心跳检测时间与当前时间的差值再次大于所述第二预设时间段，将所述准异常状态的任务标记为异常状态。