[发明专利]分布式环境下的数据补偿方法

说明书

本发明提供一种分布式环境下的数据补偿方法包括：获取数据更新事件的日志记录的步骤；根据所述日志记录核查数据的状态的步骤；更新数据的步骤。优选地，上述分布式环境下的数据补偿方法中，所述日志记录通过下述方式生成：在数据库中编写触发器监听特定数据表的特定事件，当所述特定事件发生时，将所述事件发生的时间，所述事件的内容以及所述事件涉及的数据ID记录在所述日志中。本发明的数据补偿方法，能确保分布式数据库之间数据最终一致性，而且开发简单、运行效率更高。

技术领域

本发明涉及分布式数据存储领域，具体而言，涉及一种分布式环境下，确保数据最终一致性的数据补偿方法。

背景技术

不同业务部门、业务逻辑共享数据已经是很常见的需求。以自媒体平台上最简单的笔记发布场景举例：用户上传一篇笔记，数据收集的部门需要先收集该笔记，随后由审核部门审核，审核通过之后才能由广告部门进行定向推送。

在共享数据的场景下，数据同步就很重要，否则会出现错误，比如：审核部门审核该笔记的结果是通过，那么审核部门应当首先更新自己数据库里面该笔记的状态为通过，然后将该结果通知给发布部门或者广告部门，好让两部门也同步更新该笔记的状态。但如果审查的过程完成，而通知的过程出错，则会导致审核部门明明已经审核过的笔记，在发布部门或者广告部门看来是不能发布的，出现逻辑错误。

在单点数据库场景(即上述的部门访问的是同一个数据库)中，上述问题的解决较为简单：商业的数据库软件都提供事务处理机制，从存储数据的表结构层面确保数据不会出现不一致的情况。但现实的单点数据库场景越来越少，更常见的是不同的部门维护着不同的数据库，然后在自己的数据库里存储一份该笔记的拷贝。在这种环境下，要保证不同数据库中对同一数据的一致性，传统的方式是通过应用级的事务来处理。但一方面，分布式的、跨数据库的情况下，应用级的事务开发工作量巨大，而且往往成为系统的瓶颈；另一方面，相当多的场景下，对数据的一致性要求并不十分的严格——不需要数据的实时一致性，而只需要数据的最终一致性。这就使得花费大量人力物力开发应用级事务管理、为整个系统带来瓶颈风险显得并不经济。

发明内容

鉴于实践中的业务特点和应用级事务处理的复杂性，设计一种能确保分布式数据库之间数据最终一致性，而开发简单、运行效率更高的数据同步方法对产业是有益的。

为实现上述目标，本发明提供一种分布式环境下的数据补偿方法包括：获取数据更新事件的日志记录的步骤；根据所述日志记录核查数据的状态的步骤；更新数据的步骤。

优选地，上述分布式环境下的数据补偿方法中，所述日志记录通过下述方式生成：在数据库中编写触发器监听特定数据表的特定事件，当所述特定事件发生时，将所述事件发生的时间，所述事件的内容以及所述事件涉及的数据ID记录在所述日志中。

优选地，上述分布式环境下的数据补偿方法中，所述获取数据更新事件的日志记录的方式包括主动获取。

优选地，上述分布式环境下的数据补偿方法中，所述获取数据更新事件的日志记录的方式包括监听所述日志记录的文件。

优选地，上述分布式环境下的数据补偿方法中，核查数据的状态的方法为：查看所述更新事件所涉及的数据变化是否已经被同步，如果没有，则判定需要进行数据同步。

优选地，上述分布式环境下的数据补偿方法中，核查数据的状态的方法为：查看业务层日志是否收到过与所述更新事件相关的通知，如果没有，则判断需要进行数据同步。

优选地，上述分布式环境下的数据补偿方法中，所述更新数据的步骤中，包括向业务层发送通知，所述通知中包括所述需要进行同步的数据的信息。

优选地，上述分布式环境下的数据补偿方法中，还包括定时补偿的步骤。

附图说明

图1所示为本发明的数据补偿方法流程图。

具体实施方式