[发明专利]数据任务处理方法和系统在审
| 申请号： | 201710626870.3 | 申请日： | 2017-07-27 |
| 公开（公告）号： | CN109308214A | 公开（公告）日： | 2019-02-05 |
| 发明（设计）人： | 张锋;陈杰 | 申请（专利权）人： | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号： | G06F9/48 | 分类号： | G06F9/48;G06F9/46 |
| 代理公司： | 中科专利商标代理有限责任公司 11021 | 代理人： | 吕雁葭 |
| 地址： | 100195 北京市海淀区杏石口路6*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 任务处理 任务队列 停止处理 预设条件 存储 | ||
1.一种数据任务处理方法，包括：
将待处理任务分成至少一个子任务，所述至少一个子任务存放于子任务队列中；
从所述子任务队列中获取相应的子任务进行处理，并存储所述相应的子任务的处理结果；
在所述子任务的处理结果满足预设条件时，停止处理所述待处理任务。
2.根据权利要求1所述的方法，其中，所述子任务以数据块的形式存放于所述子任务队列中，所述数据块包括所述子任务数据以及所述数据块的状态信息。
3.根据权利要求1所述的方法，其中，所述子任务队列包括阻塞队列。
4.根据权利要求1所述的方法，其中，所述从所述子任务队列中获取相应的子任务进行处理，包括：
通过线程池中的多个工作线程从所述子任务队列中获取多个相应的子任务进行处理，其中，每个所述工作线程一次对一个所述子任务进行处理。
5.根据权利要求1所述的方法，其中，所述从所述子任务队列中获取相应的子任务进行处理，还包括：
在获取到所述子任务后，将所述子任务从所述子任务队列中删除。
6.根据权利要求1所述的方法，其中，所述存储所述子任务的处理结果包括：
将所述子任务的处理结果存储在结果队列中，所述结果队列包括每个所述子任务的处理状态信息。
7.根据权利要求1所述的方法，其中，所述在所述子任务的处理结果满足预设条件时，停止处理所述待处理任务，包括：
在所述子任务的处理结果为失败，并且失败次数大于等于预设阈值时，停止处理所述待处理任务。
8.根据权利要求7所述的方法，还包括：
在所述子任务的处理结果为失败，并且失败次数小于预设阈值时，将所述子任务重新存放于子任务队列中。
9.一种数据任务处理系统，包括：
任务拆分模块，将待处理任务分成至少一个子任务，所述至少一个子任务存放于子任务队列中；
子任务处理模块，从所述子任务队列中获取相应的子任务进行处理，并存储所述相应的子任务的处理结果；
停止处理模块，在所述子任务的处理结果满足预设条件时，停止处理所述待处理任务。
10.根据权利要求9所述的系统，其中，所述子任务以数据块的形式存放于所述子任务队列中，所述数据块包括所述子任务数据以及所述数据块的状态信息。
11.根据权利要求9所述的系统，其中，所述子任务队列包括阻塞队列。
12.根据权利要求9所述的系统，其中，所述从所述子任务队列中获取相应的子任务进行处理，包括：
通过线程池中的多个工作线程从所述子任务队列中获取多个相应的子任务进行处理，其中，每个所述工作线程一次对一个所述子任务进行处理。
13.根据权利要求9所述的系统，其中，所述子任务处理模块还用于，在获取到所述子任务后，将所述子任务从所述子任务队列中删除。
14.根据权利要求9所述的系统，其中，所述存储所述子任务的处理结果包括：
将所述子任务的处理结果存储在结果队列中，所述结果队列包括每个所述子任务的处理状态信息。
15.根据权利要求9所述的系统，其中，所述在所述子任务的处理结果满足预设条件时，停止处理所述待处理任务，包括：
在所述子任务的处理结果为失败，并且失败次数大于等于预设阈值时，停止处理所述待处理任务。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司，未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201710626870.3/1.html，转载请声明来源钻瓜专利网。
