[发明专利]数据同步的方法和系统有效
申请号: | 200810088623.3 | 申请日: | 2008-03-31 |
公开(公告)号: | CN101551801A | 公开(公告)日: | 2009-10-07 |
发明(设计)人: | 齐亮 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京市中咨律师事务所 | 代理人: | 于 静;李 峥 |
地址: | 美国*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 系统 | ||
发明领域
本发明涉及数据同步的方法和系统,特别涉及增量数据同步的方法和 系统。
发明背景
近年来,随着各类移动设备(如智能手机,个人数字助理,笔记本电 脑等)的广泛使用,在机场、高级写字楼、图书馆、餐馆或咖啡馆里,移 动办公的人士比比皆是。移动设备的用户实际上可以作为系统服务器的一 个客户机,客户机所取得的现场资料需要与系统服务器数据库同步,当存 在数据的多个副本时,这些副本需要保持一致性,一旦断开连接,服务器 与每个客户机都可以修改各自的数据。为了获得数据的一致性,必须建立 连接并且使各个客户机与服务器保持同步。数据库同步技术可以实现不同 数据库之间的数据交换,并确保保持所有数据库中数据的一致性。
一种提高数据库同步效率的方法是增量数据同步,即,在客户机与服 务器同步时只需交换变化的数据,而无需交换全部数据。增量数据同步的 方法在数据库庞大而内容变化较小的情况下极为有利。例如,如果数据库 包含500,000个产品订单,并且每天只增加200个或变化200个产品订单, 那么每天将全部产品订单(即500,000)从合并了所有变化的数据库发送 到另一个要求同步的数据库将浪费大量的通信资源。
为了支持增量数据同步,传统的数据同步系统在服务器端维护一个或 多个版本号来跟踪发生变化的时间点。当客户机执行同步时,从服务器端 取出相对于最后一次同步的版本的增量数据变化。然而,变化的数据将在 行级别同步,这意味着不管这行有多少列发生变化,整行数据都将被取出 并且被发送出去。这样产生的问题是:在多数情况下该行中只有部分列被 更新,然而在有限带宽的情况下,未发生变化的列也将被发送出去。因此 在一个表包含很多列或未发生变化的列包含诸如LOG,BINARY或者 XML等当前越来越常见的大数据类型的情况下,极大地降低了同步性能。
目前存在一种在服务器与客户机之间的数据库进行增量数据同步方 法,该方法主要包括:在客户机端保存客户机端上一次同步的数据副本, 在客户机与服务器同步时,在客户端通过比较客户端数据与上一次同步的 数据副本来确定自从上一次同步客户端数据发生的数据列变化,并将该数 据列变化广播到服务器,从而来确定自从上一次同步服务器上发生的数据 变化。但是该方法有两个主要缺点,一是在同步时需要大量时间实时比较 现有数据和原有数据,增加了同步延迟,降低了同步效率;二是需要在每 一个需要同步的计算机上另外维护一个上一次同步的数据副本,增加了大 量的存储需求。因此这种增量数据同步方法的效率是一种传统的效率低下 的方法。
因此,需要一种改进的、提高同步效率的方法来支持服务器与客户机 之间的增量数据同步。
发明内容
为了解决上述问题,本发明设计了一种数据同步的方法和系统。
根据本发明的一个方面,提供一种数据同步的方法,包括:未同步时 记录数据记录的变化历史;响应于接收到的同步请求,合并所述数据记录 的变化历史;发送所述合并结果。
根据本发明的另一方面,提供一种数据同步系统,包括:记录装置, 用于未同步时记录数据记录的变化历史;同步引擎,响应于接收到的同步 请求,合并所述数据记录的变化历史,并发送所述合并结果。
本发明的方法在未同步时记录数据记录的变化历史,在进行同步时使 用高效的合并方法合并数据记录的变化历史,从而在同步时节省了大量新 旧版本的比较计算资源,并且不同于将相同数据记录的所有变化数据记录 发送到对方,而仅仅相互交换数据记录中变化的字段,同步双方各自将变 化的字段从一端发送到另一端,从而提高同步效率。
附图简述
结合附图,通过参考下列详细的示例性实施例的描述,将会更好地理 解本发明本身、优选的实施方式以及本发明的目标和优点,其中
图1示出本发明的数据同步方法的流程图;
图2示出根据本发明的服务器与客户机之间进行数据同步的系统示意 图;
图3示出根据本发明的服务器与客户机之间进行数据同步的流程图;
图4A示出服务器端源数据表的示例;
图4B示出服务器端的历史表模式;
图4C示出服务器端第一次加载源数据表的历史表的示例;
图5A示出服务器端第一次发生变化之后的源数据表的示例;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/200810088623.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置