[发明专利]一种数据处理方法及装置在审
| 申请号: | 201910231649.7 | 申请日: | 2019-03-26 |
| 公开(公告)号: | CN109977339A | 公开(公告)日: | 2019-07-05 |
| 发明(设计)人: | 李成 | 申请(专利权)人: | 新华三信息安全技术有限公司 |
| 主分类号: | G06F16/958 | 分类号: | G06F16/958;G06F9/50 |
| 代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 孟维娜;李欣 |
| 地址: | 230001 安徽省合肥市高新区*** | 国省代码: | 安徽;34 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据量 读取 待处理数据 数据处理 第一线 线程 数据处理过程 数据处理技术 第一数据 调用 申请 应用 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
按照第一线程每次读取第一数据量的数据的规则,获取所述第一线程读取待处理数据的当前数据量;
判断所述当前数据量是否大于第二数据量;
在所述当前数据量大于第二数据量的情况下,判断所述待处理数据的数据量是否超出所述第一线程的处理能力,若是,则调用第二线程,以使所述第二线程读取待处理数据并处理所读取的数据。
2.根据权利要求1所述的方法,其特征在于,所述判断所述待处理数据的数据量是否超出所述第一线程的处理能力,包括:
确定所述第一线程各次读取所述待处理数据时所读取到数据的量大于所述第二数据量的次数;
判断所述次数是否大于预设次数阈值;
若为是,判定所述待处理数据的数据量超出所述第一线程的处理能力。
3.根据权利要求1或2所述的方法,其特征在于,在所述获取所述第一线程读取待处理数据的当前数据量之后,还包括:
判断所述当前数据量是否小于所述第一数据量;
若为否,增大所述第一数据量的取值;
若为是,减小所述第一数据量的取值。
4.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
在所述当前数据量不大于所述第二数据量的情况下,增大所述第一数据量的取值;
在所述当前数据量小于所述第一数据量的情况下,减小所述第一数据量的取值。
5.一种数据处理方法,其特征在于,应用于第一线程,所述方法包括:
按照每次读取第一数量的数据的规则,获取读取待处理数据的当前数据量;
判断所述当前数据量是否大于第二数据量;
在所述当前数据量大于所述第二数据量的情况下,判断所述待处理数据的数据量是否超出所述第一线程自身的处理能力,若是,请求管理线程调用第二线程,以使得所述第二线程读取待处理数据并处理所读取的数据。
6.一种数据处理装置,其特征在于,所述装置包括:
第一数据量获取模块,用于按照第一线程每次读取第一数据量的数据的规则,获取所述第一线程读取待处理数据的当前数据量;
第一数据量判断模块,用于判断所述当前数据量是否大于第二数据量;
线程调用模块,用于在所述当前数据量大于第二数据量的情况下,判断所述待处理数据的数据量是否超出所述第一线程的处理能力,若是,则调用第二线程,以使所述第二线程读取待处理数据并处理所读取的数据。
7.根据权利要求6所述的装置,其特征在于,所述线程调用模块,具体用于:
在所述当前数据量大于第二数据量的情况下,确定所述第一线程各次读取所述待处理数据时所读取到数据的量大于所述第二数据量的次数;判断所述次数是否大于预设次数阈值;若为是,判定所述待处理数据的数据量超出所述第一线程的处理能力,并调用第二线程,以使所述第二线程读取待处理数据并处理所读取的数据。
8.根据权利要求6或7所述的装置,其特征在于,所述装置还包括:
第二数据量判断模块,用于在所述数据量获取模块获取所述当前数据量之后,判断所述当前数据量是否小于所述第一数据量;若为否,增大所述第一数据量的取值;若为是,减小所述第一数据量的取值。
9.根据权利要求6或7所述的装置,其特征在于,所述装置还包括:
数据量调整模块,用于在所述当前数据量不大于所述第二数据量的情况下,增大所述第一数据量的取值;在所述当前数据量小于所述第一数据量的情况下,减小所述第一数据量的取值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三信息安全技术有限公司,未经新华三信息安全技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910231649.7/1.html,转载请声明来源钻瓜专利网。





