[发明专利]一种动态优化的多线程数据同步方法及系统有效
申请号: | 201911308546.2 | 申请日: | 2019-12-18 |
公开(公告)号: | CN111190961B | 公开(公告)日: | 2023-09-29 |
发明(设计)人: | 熊林欣;朱兴;陈晶鑫;吕婉莹;徐锦子 | 申请(专利权)人: | 航天信息股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F9/52 |
代理公司: | 北京工信联合知识产权代理有限公司 11266 | 代理人: | 姜丽楼 |
地址: | 100195 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 动态 优化 多线程 数据 同步 方法 系统 | ||
1.一种动态优化的多线程数据同步方法,其特征在于,所述方法包括:
主线程按照预设的时间间隔阈值,根据待同步数据中每个地区的地区标识确定每个地区对应的地区数据条数;
主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程;
每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步;
其中,所述主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程,包括:
当存在未分配子线程的地区时,判断该地区对应的地区数据条数是否小于等于预设的数据同步条数阈值;若是,则创建单独处理该地区的子线程;反之,则标记该地区为需合并处理的地区;以及
当存在需合并处理的地区时,根据需合并处理的地区的对应的数据条数,创建合并处理的子线程,以为每个地区分配对应的子线程;
其中,所述每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步,包括:
每个子线程将对应的已分配地区标记为正在处理状态;
根据待同步数据的编号选取预设的数据同步条数阈值的数据,若选取的数据条数大于预设选取条数阈值,则直接调用接口同步数据,实现一次数据同步。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在每个子线程将对应的已分配地区标记为正在处理状态之前,判断该子线程对应的所有地区的处理状态;若不存在已经为正在处理状态的地区,则将该子线程对应的已分配地区标记为正在处理状态;反之,则直接结束此次数据同步。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当该次数据同步成功时,若该次同步的数据条数小于预设的数据同步条数阈值,则表示数据已全部同步完成,将该子线程对应的已分配地区标记为未处理状态;
当该次数据同步成功时,若该次同步的数据条数大于等于预设的数据同步条数阈值,则判断是否满足地区个数是否大于1且同步成功次数大于已分配的地区个数;若满足,则表示存在数据积压,将该子线程对应的已分配地区标记为未处理状态,并立即结束当前线程,由主线程重新调度分配独立处理子线程;若不满足,则重新根据待同步数据的编号重新选取预设的数据同步条数阈值的数据,以进行下一次的数据同步。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若选取的数据条数大于预设选取条数阈值,则表示数据已全部同步完成,将该子线程对应的已分配地区标记为未处理状态。
5.一种动态优化的多线程数据同步系统,其特征在于,所述系统包括:
待同步的地区数据确定单元,用于使主线程按照预设的时间间隔阈值,根据待同步数据中每个地区的地区标识确定每个地区对应的地区数据条数;
子线程分配单元,用于使主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程;
数据同步单元,用于每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步;
其中,所述子线程分配单元,使主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程,包括:
当存在未分配子线程的地区时,判断该地区对应的地区数据条数是否小于等于预设的数据同步条数阈值;若是,则创建单独处理该地区的子线程;反之,则标记该地区为需合并处理的地区;以及
当存在需合并处理的地区时,根据需合并处理的地区的对应的数据条数,创建合并处理的子线程,以为每个地区分配对应的子线程;
其中,所述数据同步单元,使每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步,包括:
每个子线程将对应的已分配地区标记为正在处理状态;
根据待同步数据的编号选取预设的数据同步条数阈值的数据,若选取的数据条数大于预设选取条数阈值,则直接调用接口同步数据,实现一次数据同步。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天信息股份有限公司,未经航天信息股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911308546.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种红蓝电子发票的关联查询方法及系统
- 下一篇:钢材的参数预测方法及终端设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置