[发明专利]数据调度处理方法、装置、设备及存储介质有效

专利信息
申请号: 202111625744.9 申请日: 2021-12-29
公开(公告)号: CN113986519B 公开(公告)日: 2022-06-03
发明(设计)人: 魏朝凌;冉体松 申请(专利权)人: 深圳市毕美科技有限公司
主分类号: G06F9/48 分类号: G06F9/48;G06F9/50;G06F9/54
代理公司: 深圳市特讯知识产权代理事务所(普通合伙) 44653 代理人: 孟智广
地址: 518000 广东省深圳市前海深港合作区南山*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 调度 处理 方法 装置 设备 存储 介质
【权利要求书】:

1.一种数据调度处理方法,其特征在于,包括步骤:

获取目标处理数据;

判断所述目标处理数据是否需要拆分处理;

若需要拆分处理,则根据预置拆分算法,对所述目标处理数据进行拆分处理,得到N个队列并行执行数据,其中,N为正整数;

将所述N个队列并行执行数据转换为N个JSON文件数据,其中,JSON文件数据用于异构系统的数据交换;

根据预置分配执行算法,对所述N个JSON文件数据进行分配执行处理,生成N个队列消息处理数据;

监听所述N个队列消息处理数据,生成数据处理结果,其中,所述数据处理结果包括:处理持续结果和处理完成结果;

其中,所述根据预置拆分算法,对所述目标处理数据进行拆分处理,得到N个队列并行执行数据包括:

基于至少两个拆分最小单元,将所述目标处理数据的参数数据拆分为多个最小执行数据,得到最小执行数据集;

将所述最小执行数据集中的数据进行排列组合处理,得到执行组合集;

将所述执行组合集中的元素确定为队列并列执行数据,得到N个队列并行执行数据;

其中,所述根据预置分配执行算法,对所述N个JSON文件数据进行分配执行处理,生成N个队列消息处理数据包括:

基于预置Java执行数据库,分析所述N个JSON文件数据,得到N个执行数据集;

基于执行数据集为对象,将所述N个执行数据集输入至M个处理线程中并行处理,得到N个队列消息处理数据,其中,M为正整数;

其中,在所述基于预置Java执行数据库,分析所述N个JSON文件数据,得到N个执行数据集之后,在所述基于执行数据集为对象,将所述N个执行数据集输入至M个处理线程中,得到N个队列消息处理数据之前,还包括:

根据预置维护周期,周期性接收Y个处理线程的状态上传数据,其中,Y为不小于M的正整数;

分析所述状态上传数据,得到所述Y个处理线程中可执行的M个处理线程;

其中,所述获取目标处理数据包括:

基于定时获取方式,从预置任务表中抓取任务数据;

接收参数设置指令,读取所述参数设置指令中的参数数据;

将所述任务数据与所述参数数据进行匹配组合处理,得到目标处理数据;

其中,所述判断所述目标处理数据是否需要拆分处理包括:

判断所述目标处理数据中的参数数据是否属于预置拆分设置数据;

若属于拆分设置数据,则确定所述目标处理数据需要进行拆分处理;

若不属于拆分设置数据,则确定所述目标处理数据不需要进行拆分处理。

2.根据权利要求1所述的数据调度处理方法,其特征在于,所述监听所述N个队列消息处理数据,生成数据处理结果包括:

依次读取所述N个队列消息处理数据,得到N个状态字符;

判断所述N个状态字符是否均属于处理完毕的状态字符;

若均属于,则将所述数据处理结果确定为处理完成结果;

若不均属于,则将所述数据处理结果确定为处理持续结果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市毕美科技有限公司,未经深圳市毕美科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111625744.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top