[发明专利]任务发布方法、装置、计算机可读存储介质及设备在审
申请号: | 201910872422.0 | 申请日: | 2019-09-16 |
公开(公告)号: | CN110780937A | 公开(公告)日: | 2020-02-11 |
发明(设计)人: | 张博;黄鹤;杨璧嘉 | 申请(专利权)人: | 腾讯大地通途(北京)科技有限公司;腾讯科技(深圳)有限公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F9/455;G06F16/25 |
代理公司: | 44232 深圳市隆天联鼎知识产权代理有限公司 | 代理人: | 刘抗美 |
地址: | 100086 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 配置信息 发布 人工成本 任务发布 任务配置 数据执行 数据源 配置 计算机可读存储介质 计算机技术领域 读取 电子设备 扫描 检测 | ||
1.一种任务发布方法,其特征在于,包括:
在扫描到待发布任务后读取所述待发布任务的任务配置,以确定出所述待发布任务对应的执行步骤;
根据各所述执行步骤对应的数据执行方式、数据源以及第一配置信息生成各所述执行步骤对应的第二配置信息;其中,所述任务配置包括所述数据执行方式和所述数据源;
根据所述第二配置信息配置各所述执行步骤并执行配置后的所述执行步骤;
当检测到配置后的各所述执行步骤执行完毕,则发布所述待发布任务。
2.根据权利要求1所述的方法,其特征在于,在扫描到待发布任务后读取所述待发布任务的任务配置,包括:
在扫描到待发布任务后确定所述待发布任务的预设执行时间;
若所述预设执行时间早于当前时间且未检测到所述待发布任务对应的执行记录,则建立所述执行记录,并读取各所述待发布任务的任务配置。
3.根据权利要求1所述的方法,其特征在于,执行配置后的各所述执行步骤,包括:
根据执行原则和所述任务配置中的步骤执行顺序执行配置后的各所述执行步骤;其中,所述执行原则包括将所述步骤执行顺序中前一步骤的输出作为后一步骤的输入。
4.根据权利要求3所述的方法,其特征在于,根据各所述执行步骤对应的数据执行方式、数据源以及第一配置信息生成各所述执行步骤对应的第二配置信息,包括:
确定各所述执行步骤对应的类型;其中,所述类型至少包括数据提取类型、数据格式校验类型、数据规则校验类型以及数据差分校验类型中的一个或多个;
根据所述类型确定各所述执行步骤对应的第一配置信息并确定出各所述执行步骤对应的执行路径;
根据各所述执行步骤对应的数据执行方式、数据源、所述第一配置信息以及所述执行路径生成各所述执行步骤对应的第二配置信息。
5.根据权利要求4所述的方法,其特征在于,若所述执行步骤为所述数据提取类型,执行配置后的所述执行步骤,包括:
根据所述数据源分别确定各所述执行步骤的目标数据执行方式。
6.根据权利要求4所述的方法,其特征在于,若所述执行步骤为所述数据规则校验类型,执行配置后的所述执行步骤,包括:
将所述执行步骤的前一步骤的输出初始化为键值对并根据所述键值对中的路径读取对应的数据;
若所述数据符合预设数据类型及预设数据范围,则输出校验结果;若所述数据不符合所述预设数据类型及所述预设数据范围,则输出所述数据及所述数据对应的执行错误说明。
7.根据权利要求4所述的方法,其特征在于,若所述执行步骤为所述数据差分校验类型,执行配置后的所述执行步骤,包括:
将历史发布任务对应的发布数据与所述执行步骤的前一步骤的输出对应的数据根据目标字段进行聚合,根据聚合结果确定数据发布量和字段变化率;
若所述数据发布量符合预设数据发布量且所述字段变化率符合预设字段变化率,则判定通过数据差分校验。
8.一种任务发布装置,其特征在于,包括:
任务配置确定单元,用于在扫描到待发布任务后读取所述待发布任务的任务配置,以确定出所述待发布任务对应的执行步骤;
配置信息生成单元,用于根据各所述执行步骤对应的数据执行方式、数据源以及第一配置信息生成各所述执行步骤对应的第二配置信息;其中,所述任务配置包括所述数据执行方式和所述数据源;
步骤执行单元,用于根据所述第二配置信息配置各所述执行步骤并执行配置后的所述执行步骤;
任务发布单元,用于当检测到配置后的各所述执行步骤执行完毕,则发布所述待发布任务。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-7任一项所述的方法。
10.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-7任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯大地通途(北京)科技有限公司;腾讯科技(深圳)有限公司,未经腾讯大地通途(北京)科技有限公司;腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910872422.0/1.html,转载请声明来源钻瓜专利网。