[发明专利]跨数据中心的数据同步方法和系统在审
申请号: | 201410777882.2 | 申请日: | 2014-12-16 |
公开(公告)号: | CN104539663A | 公开(公告)日: | 2015-04-22 |
发明(设计)人: | 郭金飞;杨健;邓伟 | 申请(专利权)人: | 北京中交兴路车联网科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京和信华成知识产权代理事务所(普通合伙) 11390 | 代理人: | 胡剑辉 |
地址: | 101111 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据中心 数据 同步 方法 系统 | ||
技术领域
本发明涉及计算机存储技术领域,尤其涉及一种跨数据中心的数据同步方法和系统。
背景技术
目前,遍布全世界的互联网用户每天都进行多种多样的交互,随时都在制造各种各样的数据,这些数据的数量是单机时代数据量的数倍。
为存储这些数据,各互联网公司在世界各地建立了庞大的数据中心,存储其全球用户每天产生的海量数据,单个数据中心的主机数量在几百至数万的数量级不等。对这些数据的管理和使用都是巨大的挑战:包括数据的读取和存储、索引和寻址、配置和管理的接口、数据中心之间的数据复制等,其中,对多数据中心之间数据同步的支持尤为迫切。
在主备数据中心实现的灾备模型中,当主数据中心的数据发生变更,需要及时的同步到备数据中心,现有的跨数据中心的数据同步方法一般要求较高配置的网络设备和网络环境,对于数据库数据、文件数据等不同数据类型采用不同的同步方案,因此存在如下不足:
1.数据同步事件的触发机制不同,导致在同步的过程中无法保证事物一致性;
2.同步过程无有效监控,无法得知进度及失败原因等;
3.数据同步失败时数据的恢复、合并无有效的工具支持。
因此,如何设置出新的跨数据中心的数据同步方法和系统,以克服现有技术的不足,成为技术人员需要考虑的问题。
发明内容
本发明所要解决的技术问题是提供一种跨数据中心的数据同步方法和系统,有效保证各个数据中心数据的及时性和一致性。
为了解决上述技术问题,本发明提供了一种跨数据中心的数据同步方法,所述方法包括:
主数据中心的业务过程触发数据抽取事件,从数据源抽取出所述业务过程涉及到的变更数据;
将所述变更数据打包成一个同步单元数据包;
发送所述同步单元数据包到备用数据中心;
备用数据中心接收所述同步单元数据包;
解析出所述同步单元数据包包括的变更数据,将所述变更数据在一个事物中应用或同步到备用数据中心的数据源。
另一方面,本发明还提供了一种数据抽取方法,用于将主数据中心的数据同步到备用数据中心,包括:
主数据中心业务过程触发数据抽取事件,从数据源抽取出所述业务过程涉及到的变更数据;
将所述变更数据打包成一个同步单元数据包;
发送所述同步单元数据包到备用数据中心。
另一方面,本发明还提供了一种数据同步方法,用于将主数据中心的数据同步到备用数据中心,包括:
接收主数据中心发送的同步单元数据包;
解析出所述同步单元数据包包括的变更数据,将所述变更数据在一个事物中应用或同步到备用数据中心的数据源。
另一方面,本发明还提供了一种跨数据中心的数据同步系统,所述系统包括设置在主数据中心的数据抽取模块和主数据中心数据发送接收模块,以及设置在备用数据中心的备用数据中心数据发送接收模块和数据同步模块,其中,
所述数据抽取模块,用于当主数据中心的业务过程触发数据抽取事件,从数据源抽取出所述业务过程涉及到的变更数据;
所述主数据中心数据发送接收模块,用于将所述变更数据打包成一个同步单元数据包,并发送所述同步单元数据包;
所述备用数据中心数据发送接收模块,用于接收所述同步单元数据包;
所述数据同步模块,用于解析出所述同步单元数据包包括的变更数据,将所述变更数据在一个事物中应用或同步到备用数据中心的数据源。
另一方面,本发明还提供了一种数据抽取装置,设置于主数据中心,包括:
数据抽取模块,用于当业务过程触发数据抽取事件,从数据源抽取出所述业务过程涉及到的变更数据并打包成一个同步单元;
主数据中心数据发送接收模块,用于将所述同步单元数据包进行发送。
另一方面,本发明还提供了一种数据同步装置,设置于备用数据中心,包括:
备用数据中心数据发送接收模块,用于接收主数据中心发送的同步单元数据包;
数据同步模块,用于解析出所述同步单元数据包包括的变更数据,将所述变更数据在一个事物中应用或同步到备用数据中心的数据源。
本发明提供的跨数据中心的数据同步方法和系统,能够很方便的实施数据同步,并有效保证数据的及时性和一致性。具体来说,有益效果包括以下几个方面:
1、由业务过程触发数据同步,保证业务过程中涉及的不同数据类型的同步机制一致性;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中交兴路车联网科技有限公司;,未经北京中交兴路车联网科技有限公司;许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410777882.2/2.html,转载请声明来源钻瓜专利网。
- 上一篇:通讯方法及装置
- 下一篇:一种系统扩容时零数据迁移的数据分布存储方法及系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置