[发明专利]一种多区域多活服务的数据同步方法和装置有效
申请号: | 201711428997.0 | 申请日: | 2017-12-26 |
公开(公告)号: | CN109962957B | 公开(公告)日: | 2022-04-05 |
发明(设计)人: | 张伟;曾希柳 | 申请(专利权)人: | 珠海全志科技股份有限公司 |
主分类号: | H04L67/02 | 分类号: | H04L67/02;H04L67/1095;H04L67/2866 |
代理公司: | 广东深宏盾律师事务所 44364 | 代理人: | 赵琼花 |
地址: | 519085 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 区域 服务 数据 同步 方法 装置 | ||
本发明公开了一种多区域多活服务的数据同步方法和装置。方法包括以下步骤:在模型数据更新后,获取待更新的模型数据的相关信息;将相关信息序列化成中间消息体;通过REST接口将中间消息体同步到被同步端;检测中间消息体的同步结果,若中间消息体同步失败,则将其同步失败记录写入到异常同步消息队列;通过服务检测来判断是否可以向被同步端重新发送数据;若为是,则依据异常同步消息队列内的同步失败记录重新向被同步端同步相应的中间消息体。可以实现模型数据在有变更时及时同步到被同步端;且面向model层进行同步和持久化,无需手动编辑sql,维护成本低。数据变化发生端通过REST接口检测同步结果,同步异常消息在适当时机再次进行同步。
技术领域
本发明涉及通信技术领域,尤其涉及一种多区域多活服务的数据同步方法和装置。
背景技术
数据同步是多区域多活服务必须要考虑的问题,以保证在不同区域提供服务的一致性。数据同步最终体现在文件或数据库的同步。当主区域有数据变化时,数据同步装置把最新版本的数据按照既定同步规则同步到其他区域。
但是,当从区域的数据托管在第三方云平台且该区域不支持数据库级别的数据同步服务或异源异构数据库之间进行数据同步时,就需要通过其它方法来进行数据同步。对此,主流的做法是:首先,用脚本把数据从数据库导出,至文件系统中;然后,通过脚本导入到其它需要同步的应用服务的数据库中。这种方法通常需要繁杂的配置及脚本编写调试,且对表结构一致性有严格要求。
目前,数据库同步技术处理主要面向表及其属性列进行同步,在类属性变更时需要及时同步更新数据同步配置;对于定时进行数据同步的技术,不能保证数据的及时同步;采用非增量同步,先删除旧数据,再插入最新的数据,在数据集比较大的情况下,消耗带宽资源。此外,数据变化发布端先将同步数据放到消息队列中,数据变化消费端从消息队列中获取同步数据,数据变化发布端无法直接检测数据变化消费端的同步状况,数据同步失败后,数据变化发布端无法采取应对措施。
发明内容
针对现有技术的不足,本发明提出了一种多区域多活服务的数据同步方法和装置。
为了实现上述目的,本发明技术方案如下:
一种多区域多活服务的数据同步方法,包括以下步骤:
S11:在模型数据更新后,获取待更新的模型数据的相关信息;S12:将所述相关信息序列化成中间消息体;S13:通过REST接口将所述中间消息体同步到被同步端;S14:检测所述中间消息体的同步结果,若所述中间消息体同步失败,则将其同步失败记录写入到异常同步消息队列;S15:通过服务检测来判断是否可以向被同步端重新发送数据;若为是,则依据异常同步消息队列内的同步失败记录重新向被同步端同步相应的所述中间消息体;若为否,则等待若干时间后,重新执行S15。
进一步地,所述S14包括以下步骤:
通过HTTP返回状态码,若状态码的值非200,则将其同步失败记录写入到异常同步消息队列。
进一步地,所述模型数据的相关信息包括:模型名称、模型数据键值、模型数据版本、模型数据的上层类基本属性。
进一步地,所述中间消息体包括:模型名称数据体、模型数据键值数据体、模型数据版本数据体、模型数据的上层类基本属性数据体,以及更新类型数据体、数据变化发生端标识数据体、模型数据变化时间数据体。
一种多区域多活服务的数据同步装置,所述数据同步装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序;所述计算机程序被所述处理器执行时实现上述中任一项所述的方法的步骤。
一种多区域多活服务的数据同步方法,包括以下步骤:
S21:接收数据变化发生端同步的中间消息体;所述中间消息体由数据变化发生端根据待更新的模型数据的相关信息生成;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于珠海全志科技股份有限公司,未经珠海全志科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711428997.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:用于向用户推荐通信业务的方法和系统
- 下一篇:文档处理方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置