[发明专利]一种基于多线程的实时数据分析任务分发处理方法有效

专利信息
申请号: 201710344177.7 申请日: 2017-05-16
公开(公告)号: CN107179942B 公开(公告)日: 2020-12-01
发明(设计)人: 王广彪;魏石磊;鞠军委;李宝瑞;徐桂城;张志辉;韩顺利 申请(专利权)人: 中国电子科技集团公司第四十一研究所
主分类号: G06F9/48 分类号: G06F9/48
代理公司: 济南圣达知识产权代理有限公司 37221 代理人: 张勇
地址: 266555 山东省*** 国省代码: 山东;37
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 多线程 实时 数据 分析 任务 分发 处理 方法
【权利要求书】:

1.一种基于多线程的实时数据分析任务分发处理方法,其特征在于:包括以下步骤:

(1) MZ 光纤周界入侵监测仪器的数据采集线程实时采集数据,并将采集到的数据存放至用于暂存数据的循环队列缓冲池中;

(2) MZ 光纤周界入侵监测仪器的数据分发线程检测循环队列缓冲池中的未处理数据,并检测是否存在空闲的数据处理线程,若各数据处理线程均处于忙碌状态,则动态创建新的数据处理线程,形成动态配合的多线程的任务分发处理过程,数据分发线程将循环队列缓冲池中的数据以数据任务的形式分发至 MZ 光纤周界入侵监测仪器的空闲的数据处理线程,同时,将空闲的数据处理线程的工作状态置为忙碌;

(3)数据处理线程接收到数据分发线程分发的数据任务后,对数据任务进行处理,处理完成后,数据处理线程自动将其自身的工作状态置为空闲;

所述步骤(1)中,所述的循环队列缓冲池的起始状态为一个循环的空队列,该循环队列缓冲池中具有表征未处理数据开始位置的下标 front 及表征未处理数据结束位置的下标rear,且两者的初始值均为 0;

所述步骤(2)中,数据分发线程将未处理数据分发至数据处理线程的具体步骤为:

I.检查当前是否存在未处理的数据,并判断循环队列缓冲池中未处理的数据是否满足处理条件;

II.查询空闲的数据处理线程数量;

III.数据分发线程对未处理数据进行拷贝,将拷贝好的数据分发到数据处理线程中,每分发完一个未处理数据,将循环队列缓冲池中的rear的下标值加 b,数据分发线程的分发速度快于数据采集线程的采集速度;b表示单次数据处理线程的处理点数;

数据分发线程检查当前是否存在未处理数据,并判断循环队列缓冲池中未处理的数据是否满足处理条件的具体方法为:判断未处理数据的点数 a 是否不小于单次数据处理线程的处理点数 b,若 ab,则不满足处理条件,数据分发线程继续对循环队列缓冲池进行监控;若 a≥b,则满足处理条件,数据分发线程将未处理的数据拷贝并分发至空闲状态的数据处理线程进行处理,若所有的数据处理线程均处于忙碌状态,则创建新的数据处理线程,并将未处理的数据分发至新创建的数据处理线程中,同时将新创建的数据处理线程的工作状态置为忙碌;其中,未处理数据的点数 a 为 rear 顺时针到达 front 所经过的下标个数;

数据分发线程对未处理数据进行拷贝的具体方法为:以 rear 为起始位置,将连续 b个数据拷贝到新的数据 Data[k][b]中,拷贝完成后,将表示未处理数据结束位置的下标rear顺时针移动 b 个位置,其中,k 表示第 k 个数据处理线程;

每个数据处理线程均设有状态标志位,第 i 个数据处理线程的状态标志位为 Flag[i],其中,i∈【0,M-1】,M 为数据处理线程的总个数;所述步骤(2)中,将空闲的数据处理线程的工作状态置为忙碌的具体方法为:数据分发线程依次对现有的各个数据处理线程的状态标志位进行检测,若其状态标志位的值为 0,则该数据处理线程处于空闲状态,若其状态标志位的值为 1,则该数据处理线程处于忙碌状态,检测顺序自 Flag[0]开始,直至找到第一个空闲状态的数据处理线程 k,并将该第 k 个数据处理线程的状态标志位 Flag[k]置为 1;如果现有的数据处理线程均处于忙碌状态,则创建新的数据处理线程;

所述步骤(3)中,数据处理线程将其自身的工作状态置为空闲的具体方法为:将其自身的工作状态标志位 Flag[k]赋值为 0,k 的取值范围为【0,M-1】。

2.根据权利要求1 所述的一种基于多线程的实时数据分析任务分发处理方法,其特征在于:所述步骤(1)中,所述数据采集线程将采集到的数据存放至循环队列缓冲池后,会将表征循环队列缓冲池中未处理数据开始位置的下标 front 顺时针移动,每存放一个数据,front 的值加 1。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电子科技集团公司第四十一研究所,未经中国电子科技集团公司第四十一研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710344177.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top