[发明专利]一种基于多线程的实时数据分析任务分发处理方法有效
| 申请号: | 201710344177.7 | 申请日: | 2017-05-16 |
| 公开(公告)号: | CN107179942B | 公开(公告)日: | 2020-12-01 |
| 发明(设计)人: | 王广彪;魏石磊;鞠军委;李宝瑞;徐桂城;张志辉;韩顺利 | 申请(专利权)人: | 中国电子科技集团公司第四十一研究所 |
| 主分类号: | G06F9/48 | 分类号: | G06F9/48 |
| 代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 张勇 |
| 地址: | 266555 山东省*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 多线程 实时 数据 分析 任务 分发 处理 方法 | ||
1.一种基于多线程的实时数据分析任务分发处理方法,其特征在于:包括以下步骤:
(1) MZ 光纤周界入侵监测仪器的数据采集线程实时采集数据,并将采集到的数据存放至用于暂存数据的循环队列缓冲池中;
(2) MZ 光纤周界入侵监测仪器的数据分发线程检测循环队列缓冲池中的未处理数据,并检测是否存在空闲的数据处理线程,若各数据处理线程均处于忙碌状态,则动态创建新的数据处理线程,形成动态配合的多线程的任务分发处理过程,数据分发线程将循环队列缓冲池中的数据以数据任务的形式分发至 MZ 光纤周界入侵监测仪器的空闲的数据处理线程,同时,将空闲的数据处理线程的工作状态置为忙碌;
(3)数据处理线程接收到数据分发线程分发的数据任务后,对数据任务进行处理,处理完成后,数据处理线程自动将其自身的工作状态置为空闲;
所述步骤(1)中,所述的循环队列缓冲池的起始状态为一个循环的空队列,该循环队列缓冲池中具有表征未处理数据开始位置的下标 front 及表征未处理数据结束位置的下标rear,且两者的初始值均为 0;
所述步骤(2)中,数据分发线程将未处理数据分发至数据处理线程的具体步骤为:
I.检查当前是否存在未处理的数据,并判断循环队列缓冲池中未处理的数据是否满足处理条件;
II.查询空闲的数据处理线程数量;
III.数据分发线程对未处理数据进行拷贝,将拷贝好的数据分发到数据处理线程中,每分发完一个未处理数据,将循环队列缓冲池中的rear的下标值加 b,数据分发线程的分发速度快于数据采集线程的采集速度;b表示单次数据处理线程的处理点数;
数据分发线程检查当前是否存在未处理数据,并判断循环队列缓冲池中未处理的数据是否满足处理条件的具体方法为:判断未处理数据的点数 a 是否不小于单次数据处理线程的处理点数 b,若 ab,则不满足处理条件,数据分发线程继续对循环队列缓冲池进行监控;若 a≥b,则满足处理条件,数据分发线程将未处理的数据拷贝并分发至空闲状态的数据处理线程进行处理,若所有的数据处理线程均处于忙碌状态,则创建新的数据处理线程,并将未处理的数据分发至新创建的数据处理线程中,同时将新创建的数据处理线程的工作状态置为忙碌;其中,未处理数据的点数 a 为 rear 顺时针到达 front 所经过的下标个数;
数据分发线程对未处理数据进行拷贝的具体方法为:以 rear 为起始位置,将连续 b个数据拷贝到新的数据 Data[k][b]中,拷贝完成后,将表示未处理数据结束位置的下标rear顺时针移动 b 个位置,其中,k 表示第 k 个数据处理线程;
每个数据处理线程均设有状态标志位,第 i 个数据处理线程的状态标志位为 Flag[i],其中,i∈【0,M-1】,M 为数据处理线程的总个数;所述步骤(2)中,将空闲的数据处理线程的工作状态置为忙碌的具体方法为:数据分发线程依次对现有的各个数据处理线程的状态标志位进行检测,若其状态标志位的值为 0,则该数据处理线程处于空闲状态,若其状态标志位的值为 1,则该数据处理线程处于忙碌状态,检测顺序自 Flag[0]开始,直至找到第一个空闲状态的数据处理线程 k,并将该第 k 个数据处理线程的状态标志位 Flag[k]置为 1;如果现有的数据处理线程均处于忙碌状态,则创建新的数据处理线程;
所述步骤(3)中,数据处理线程将其自身的工作状态置为空闲的具体方法为:将其自身的工作状态标志位 Flag[k]赋值为 0,k 的取值范围为【0,M-1】。
2.根据权利要求1 所述的一种基于多线程的实时数据分析任务分发处理方法,其特征在于:所述步骤(1)中,所述数据采集线程将采集到的数据存放至循环队列缓冲池后,会将表征循环队列缓冲池中未处理数据开始位置的下标 front 顺时针移动,每存放一个数据,front 的值加 1。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电子科技集团公司第四十一研究所,未经中国电子科技集团公司第四十一研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710344177.7/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





