[发明专利]一种任务调度方法、装置、计算机设备及存储介质在审
申请号: | 202211236236.6 | 申请日: | 2022-10-10 |
公开(公告)号: | CN115630806A | 公开(公告)日: | 2023-01-20 |
发明(设计)人: | 桑文锋;曹犟;刘耀洲;付力力;熊磊 | 申请(专利权)人: | 神策网络科技(北京)有限公司 |
主分类号: | G06Q10/0631 | 分类号: | G06Q10/0631;G06Q10/0633;G06Q10/10 |
代理公司: | 深圳紫藤知识产权代理有限公司 44570 | 代理人: | 苏蕾 |
地址: | 100083 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 任务 调度 方法 装置 计算机 设备 存储 介质 | ||
1.一种任务调度方法,其特征在于,所述方法包括:
确定待处理的批量任务,获取所述批量任务的任务数据的数据属性;
根据所述批量任务中的任务数据的数据属性,对所述批量任务进行任务拆分,以及将拆分得到的子任务根据所述数据属性保存到任务目录下得到数据目录,所述数据目录中的每一条任务目录下的子任务在所述数据属性上满足预设匹配条件;
通过预设的主处理器查询所述数据目录,当所述数据目录中存在待处理的任务目录时,获取至少一个副处理器的任务处理状态;
基于至少一个所述副处理器的任务处理状态,根据预设的任务调度逻辑确定处理所述待处理的任务目录对应的目标副处理器;
将所述待处理的任务目录下的待处理子任务分配给所述目标副处理器,以使所述目标副处理器对所述待处理子任务进行任务处理,并将任务处理完成的待处理子任务发送至下游模块。
2.根据权利要求1所述的方法,其特征在于,在通过预设的主处理器查询所述数据目录之后,还包括:
当所述数据目录中存在待处理的任务目录时,在预设的任务状态监控表中添加所述待处理的任务目录对应的目标任务记录;
在将所述待处理的任务目录下的待处理子任务分配给所述目标副处理器之后,还包括:
根据所述目标副处理器在所述任务状态监控表中的目标任务记录处更新的心跳信号,确定所述待处理子任务的任务状态。
3.根据权利要求2所述的方法,其特征在于,在将所述待处理的任务目录下的待处理子任务分配给所述目标副处理器之后,还包括:
若监测到所述目标任务记录处的心跳信号在预设时间内并未更新,则确定所述待处理子任务的任务状态为处理失败;
重新获取至少一个副处理器的任务处理状态,并基于重新获取的至少一个所述副处理器的任务处理状态,根据预设的任务调度逻辑确定处理所述待处理子任务的副处理器。
4.根据权利要求2所述的方法,其特征在于,所述基于至少一个所述副处理器的任务处理状态,根据预设的任务调度逻辑确定处理所述待处理的任务目录对应的目标副处理器,包括:
根据所述任务状态监控表中各个任务记录对应的心跳信号,确定当前任务进行处理的任务数量;
当所述任务数量小于预设数量阈值时,基于至少一个所述副处理器的任务处理状态,根据预设的任务调度逻辑确定处理所述待处理的任务目录对应的目标副处理器。
5.根据权利要求1所述的方法,其特征在于,所述将拆分得到的子任务根据所述数据属性保存到任务目录下得到数据目录,包括:
将拆分得到的子任务对应的任务数据保存到所述子任务对应的任务目录的目录文件夹中;
所述将所述待处理的任务目录下的待处理子任务分配给所述目标副处理器,以使所述目标副处理器对所述待处理子任务进行任务处理,包括:
将所述待处理的任务目录下的待处理子任务分配给所述目标副处理器,以使所述目标副处理器从所述待处理的任务目录对应的目录文件夹中获取所述待处理子任务对应的任务数据,并对所述待处理子任务的任务数据进行任务处理。
6.根据权利要求1所述的方法,其特征在于,所述数据属性包括时间属性,所述根据所述批量任务中的任务数据的数据属性,对所述批量任务进行任务拆分,包括:
根据所述批量任务中的任务数据的时间属性,将时间属性一致的任务数据对应的任务拆分为一个子任务。
7.根据权利要求1至6任一项所述的方法,其特征在于,在通过预设的主处理器查询所述数据目录之前,还包括:
获取各个已注册的处理器的注册时间;
根据各个处理器的注册时间,选举出注册时间最早的处理器作为主处理器;
将各个已注册的处理器中除所述主处理器之外的处理器确定为副处理器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于神策网络科技(北京)有限公司,未经神策网络科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211236236.6/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理