[发明专利]一种基于数据处理的批量数据异步解决方法及相关设备有效
申请号: | 201910342283.0 | 申请日: | 2019-04-26 |
公开(公告)号: | CN110232092B | 公开(公告)日: | 2023-08-01 |
发明(设计)人: | 黄泽浩 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06Q10/10 |
代理公司: | 北京市京大律师事务所 11321 | 代理人: | 居梦琪 |
地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据处理 批量 数据 异步 解决方法 相关 设备 | ||
1.一种基于数据处理的批量数据异步解决方法,其特征在于,包括:
获取业务人员的下载请求,根据所述下载请求生成下载任务,将所述下载任务加入到任务下载池中;
计算所述任务下载池中多个所述下载任务的顺序权重,依据所述顺序权重从大到小依次排列所述下载任务的任务顺序;
按照所述任务顺序执行所述下载任务,获得所述下载任务对应的任务数据,将执行成功的下载任务加入待生成文件任务池,将执行失败的下载任务加入任务完成通知池;
计算所述待生成文件任务池中的多个所述下载任务的生成权重,依据所述生成权重从大到小依次将对应的任务数据生成任务文件,并将所述任务文件中的下载任务加入所述任务完成通知池;
计算所述任务完成通知池中的多个所述下载任务的通知权重,依据所述通知权重定时遍历所述任务完成通知池,将已完成的所述下载任务通知对应业务人员并将成功生成的所述任务文件发送至对应业务人员,将已通知的所述下载任务从任务完成通知池移除;
所述计算所述任务下载池中多个所述下载任务的顺序权重,依据所述顺序权重从大到小依次排列所述下载任务的任务顺序,包括:
获取所述下载任务进入所述下载任务池的时间,统计所述下载任务的排队时长;
依据所述下载任务的优先级、排队时长、提交人角色、任务类型计算所述下载任务的顺序权重;
依据所述下载任务池中所述下载任务的顺序权重从大到小排列所述下载任务的任务顺序;
所述依据所述下载任务的优先级、排队时长、提交人角色、任务类型计算所述下载任务的顺序权重,包括:
将所述下载任务的优先级预设为N个等级,N为整数,获取所述下载任务的优先级,将所述优先级对应的等级记为数值n;
将所述下载任务的排队时长以分钟计算,记为数值m,m为整数,不满1分钟的舍弃;
将所述提交人角色设为Z个等级,Z为整数,获取所述下载任务的提交人角色,将所述提交人角色对应的等级记为数值z;
将所述下载任务设为K个任务类型,K为整数,获取所述下载任务的任务类型,将所述任务类型对应的等级记为数值k;
计算第i个所述下载任务的顺序权重,所述顺序权重的计算公式如下:
其中,为第个所述下载任务的顺序权重,为优先级系数,为排队时长系数,为提交人角色系数,为任务类型系数,为第个所述下载任务的优先级数值,为第个所述下载任务的排队时长数值,为第个所述下载任务的提交人角色数值,为第个所述下载任务的任务类型数值。
2.如权利要求1所述的一种基于数据处理的批量数据异步解决方法,其特征在于,所述获取业务人员的下载请求,包括:
获取业务人员的访问请求,将数据下载页面呈现给所述业务人员,通过所述数据下载页面获取所述业务人员提交的所述下载请求,所述下载请求包括数据筛选条件、统计维度、优先级。
3.如权利要求2所述的一种基于数据处理的批量数据异步解决方法,其特征在于,所述根据所述下载请求生成下载任务,将所述下载任务加入到任务下载池中,包括:
获取人力资源系统的职位登记表,依据所述职位登记表获取所述业务人员的职位,确定所述下载请求的提交人角色;
读取所述下载请求,依据所述下载请求中的所述筛选条件、所述统计维度定义所述下载请求的任务类型;
将所述提交人角色、数据筛选条件、统计维度、任务类型生成下载任务,将所述下载任务加入任务下载池并将数据筛选条件、统计维度对应的优先级标记在所述下载任务中。
4.如权利要求1所述的一种基于数据处理的批量数据异步解决方法,其特征在于,所述计算所述待生成文件任务池中的多个所述下载任务的生成权重,依据所述生成权重从大到小依次将对应的任务数据生成任务文件,并将所述任务文件中的下载任务加入所述任务完成通知池,包括:
依据顺序权重的计算方法,计算待生成文件任务池中的下载任务的生成权重;
依据生成权重从大到小将对应的所述任务数据进行格式标准化处理,将格式统一后的所述任务数据写入预设的任务数据汇总表格中,生成任务文件,将所述任务文件中的下载任务加入任务完成通知池。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910342283.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置