[发明专利]一种动态优化的多线程数据同步方法及系统有效

专利信息
申请号: 201911308546.2 申请日: 2019-12-18
公开(公告)号: CN111190961B 公开(公告)日: 2023-09-29
发明(设计)人: 熊林欣;朱兴;陈晶鑫;吕婉莹;徐锦子 申请(专利权)人: 航天信息股份有限公司
主分类号: G06F16/27 分类号: G06F16/27;G06F9/52
代理公司: 北京工信联合知识产权代理有限公司 11266 代理人: 姜丽楼
地址: 100195 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 动态 优化 多线程 数据 同步 方法 系统
【权利要求书】:

1.一种动态优化的多线程数据同步方法,其特征在于,所述方法包括:

主线程按照预设的时间间隔阈值,根据待同步数据中每个地区的地区标识确定每个地区对应的地区数据条数;

主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程;

每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步;

其中,所述主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程,包括:

当存在未分配子线程的地区时,判断该地区对应的地区数据条数是否小于等于预设的数据同步条数阈值;若是,则创建单独处理该地区的子线程;反之,则标记该地区为需合并处理的地区;以及

当存在需合并处理的地区时,根据需合并处理的地区的对应的数据条数,创建合并处理的子线程,以为每个地区分配对应的子线程;

其中,所述每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步,包括:

每个子线程将对应的已分配地区标记为正在处理状态;

根据待同步数据的编号选取预设的数据同步条数阈值的数据,若选取的数据条数大于预设选取条数阈值,则直接调用接口同步数据,实现一次数据同步。

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

在每个子线程将对应的已分配地区标记为正在处理状态之前,判断该子线程对应的所有地区的处理状态;若不存在已经为正在处理状态的地区,则将该子线程对应的已分配地区标记为正在处理状态;反之,则直接结束此次数据同步。

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

当该次数据同步成功时,若该次同步的数据条数小于预设的数据同步条数阈值,则表示数据已全部同步完成,将该子线程对应的已分配地区标记为未处理状态;

当该次数据同步成功时,若该次同步的数据条数大于等于预设的数据同步条数阈值,则判断是否满足地区个数是否大于1且同步成功次数大于已分配的地区个数;若满足,则表示存在数据积压,将该子线程对应的已分配地区标记为未处理状态,并立即结束当前线程,由主线程重新调度分配独立处理子线程;若不满足,则重新根据待同步数据的编号重新选取预设的数据同步条数阈值的数据,以进行下一次的数据同步。

4.根据权利要求1所述的方法,其特征在于,所述方法还包括:

若选取的数据条数大于预设选取条数阈值,则表示数据已全部同步完成,将该子线程对应的已分配地区标记为未处理状态。

5.一种动态优化的多线程数据同步系统,其特征在于,所述系统包括:

待同步的地区数据确定单元,用于使主线程按照预设的时间间隔阈值,根据待同步数据中每个地区的地区标识确定每个地区对应的地区数据条数;

子线程分配单元,用于使主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程;

数据同步单元,用于每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步;

其中,所述子线程分配单元,使主线程根据每个地区对应的地区数据条数,按照预设的子线程分配策略为每个地区分配对应的子线程,包括:

当存在未分配子线程的地区时,判断该地区对应的地区数据条数是否小于等于预设的数据同步条数阈值;若是,则创建单独处理该地区的子线程;反之,则标记该地区为需合并处理的地区;以及

当存在需合并处理的地区时,根据需合并处理的地区的对应的数据条数,创建合并处理的子线程,以为每个地区分配对应的子线程;

其中,所述数据同步单元,使每个子线程根据已分配地区对应的地区数据条数,按照预设的同步策略进行数据同步,包括:

每个子线程将对应的已分配地区标记为正在处理状态;

根据待同步数据的编号选取预设的数据同步条数阈值的数据,若选取的数据条数大于预设选取条数阈值,则直接调用接口同步数据,实现一次数据同步。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天信息股份有限公司,未经航天信息股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911308546.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top