[发明专利]一种跨机房数据库的数据一致性校验方法

说明书

一种跨机房数据库数据一致性校验的方法，包括：1：一致性校验环境的设置，具体为：在各个地域的机房内分别部署主节点数据库和子节点数据库，且每个数据库中设有相同的表结构；2)配置校验任务信息，校验任务信息包括校验执行的频率、有校验需求的数据库表及有校验需求的表字段；3)按照校验执行的频率，每隔固定的时间段，主节点数据库主动触发校验任务；4)各个子节点数据库接收到校验任务信息后，提取信息中数据库、数据表及表字段信息指令；5)主节点数据库一直保持接收各子节点数据库发送数据的状态，一边接收校验结果，一边对校验结果进行比对，并判断各个子节点的校验结果是否一致。

技术领域

本发明属于多数据库的联机数据交互领域，具体涉及一种跨机房数据库的数据一致性校验方法。

背景技术

伴随着B2B电子商务行业的发展，互联网服务业务越来越多，用户基数也越来越大，为保障可靠性的需求，网站多会部署在在不同地域的机房中，各机房中部署数据库系统，并提供完整的网站服务，各机房数据库之间数据互相复制，保证各机房都有一套完整的数据。然而，多机房最大的挑战是机房之间因网络延迟而带来的数据更新延迟，最终导致各机房数据库之间的数据不一致。现有主备数据库校验一致性技术中都是将在同一时间的主数据库和备用数据库进行比对以确定两个数据库之间的数据是否已实现同步，然而，因数据同步一般是在主数据库发生数据更新后，主数据库再将更新的数据同步到备用数据库中，这样就导致数据同步过程中会存在一定的延时，如果以同一时间点两个数据库之间的数据进行比对的话，往往会因为时间延迟问题导致本该判定为一致的数据被判为不一致；常用的数据库一致性技术校验方法是先对数据库中的表关键字排序，随后再以相应的算法比较，这类解决方案占用诸如内存、swap空间能大量数据库资源，在数据量巨大的时候尤为明显，甚至影响数据库的性能。

为在不影响数据库性能的前提下解决数据库不一致的问题，专利“数据库一致性校验方法及系统、定位数据库差异的方法及系统(申请号：201310704107.X)”做了技术探究，提出一种校验数据库不一致性的方法，具体步骤包括：a.按照预定条件将主数据库与备数据库中的数据行分组；b.计算主数据库每一分组及备数据库每一分组的md5值；c.将所计算的主数据库的每一分组的md5值与相应的备数据库分组的md5值比较，如果主数据库所有分组的md5值与相应的备数据库分组的md5值一致，则表明主数据库与备数据库一致。还提供相应的系统，以及基于该方法的定位数据库差异的方法及系统。该专利虽然能够以较小的计算量及网络数据传输量，定位到存在差异的数据，但该专利仍旧还仅停留在主备数据库一致性校验的研究上，而且采用分组形式校验并不适用于大量不一致数据，反而将带来因不一致数据分散在不同分组而导致需要重复查询数据的问题，同时该专利也没有对如何实现跨地域数据库间的数据自动化定时校验给予明确的解决方案。

发明内容

为解决现有技术存在的缺陷，本发明目的是，提供一种跨机房数据库数据一致性校验的方法，通过在跨地域的数据库间部署消息系统，并预先配置校验任务信息，包括校验频率、有校验需要的数据库表及校验字段；当校验启动后，能按照预先设置的校验频率，定时地启动校验操作，并在校验任务过程中持续地收集各个数据库表内某一具体数据的校验值，实时反馈校验结果，不仅保证在跨地域环境中自动化且高效地发现不一致的问题，而且能准确定位到具体的数据，有利于提高数据库不一致性问题的解决速度。

本发明的技术方案是，一种跨机房数据库数据一致性校验的方法，具体步骤包括：步骤1：一致性校验环境的设置，具体为：在各个地域的机房内分别部署主节点数据库和子节点数据库，且每个数据库中设有相同的表结构；主节点数据库和子节点数据库之间构建消息系统，实现跨地域数据库间以消息传递的方式传输校验值；

步骤2：配置校验任务信息，校验任务信息包括校验执行的频率、有校验需求的数据库表及有校验需求的表字段；