[发明专利]基于令牌桶的数据复制过程的监控方法及系统

说明书

本发明公开了一种基于令牌桶的数据复制过程的监控方法及系统，所述监控方法包括：S1、在多个服务器上均配置至少一种监控服务；S2、不同的所述服务器上的同一种所述监控服务根据令牌桶算法，向令牌桶发送申请监控令牌的第一指令；S3、所述令牌桶根据所述第一指令分配一第一监控令牌；S4、当所述服务器中的一第一服务器争抢到所述第一监控令牌时，向任务池发送申请监控任务的指令；S5、所述任务池分配所述监控任务，所述第一服务器的所述监控服务接收并执行所述监控任务。本发明能够实现对多个关系型数据库或非关系型数据库之间的数据复制过程进行多维度的实时、持续监控与告警，保证数据复制过程的数据同步的实时性和可靠性。

技术领域

本发明涉及数据传输技术领域，特别涉及一种基于令牌桶的数据复制过程的监控方法及系统。

背景技术

随着互联网技术的快速发展，各个大公司一般都采用事业部制的管理方式来提升公司效率和应对行业竞争。但是，像用户订单等需要整体的存储和展示的数据，需要将各事业部的不同数据格式的订单数据复制到整个订单数据中心来存储和展示。这种异构数据复制方式可以高效的完成数据的复制和保存，以实现公司的业务需要。因此，在此类应用场景中，对数据的实时性传输的要求非常严格。

由于现有的每个公司的数据库产品的推出都只能提供对自身产品运行实例的监控功能，不具备对其他公司数据库产品提供监控功能；且现有的数据库的监控方法只能监控同种数据库产品，如对于SQL Server DB(一种数据库)，监控方法只能监控到SQL Server(一种关系型数据库管理系统)机群中的实例，而不能监控MySQL DB(一种数据库)的实例。另外，现有的数据库的监控方法只能监控到数据库中的表级别，不能监控到每条记录的级别，且告警延迟较高，同时监控维度也受到数据库类型的限制；因此，现有的数据库的监控方法存在不能保证对异构数据复制过程的多维度的实时、持续监控，对告警情况不能及时通知给相关负责人处理等缺点。

发明内容

本发明要解决的技术问题是为了克服现有技术的数据库的监控方法存在不能保证对异构数据复制过程多维度的实时、持续监控，对告警情况不能及时通知给相关负责人处理等缺陷，目的在于提供一种基于令牌桶的数据复制过程的监控方法及系统。

本发明是通过下述技术方案来解决上述技术问题：

本发明提供一种基于令牌桶的数据复制过程的监控方法，所述监控方法包括：

S1、在多个服务器上均配置至少一种监控服务；

其中，所述服务器存储有多个数据库；

S2、当所述服务器中不同的所述数据库之间进行数据复制操作时，不同的所述服务器上的同一种所述监控服务根据令牌桶算法，向令牌桶发送申请监控令牌的第一指令；

S3、所述令牌桶根据所述第一指令分配一第一监控令牌，不同的所述服务器上的同一种所述监控服务争抢所述第一监控令牌；

S4、当所述服务器中的一第一服务器争抢到所述第一监控令牌时，所述第一服务器的所述监控服务向任务池发送申请监控任务的指令；

其中，所述监控任务为与所述监控服务相对应的监控内容；

所述任务池存储有多种监控任务；

S5、所述任务池分配所述监控任务，所述第一服务器的所述监控服务接收并执行所述监控任务。

较佳地，步骤S5之后还包括：

S6、当完成所述监控任务后，更新所述任务池，并继续步骤S2。

较佳地，步骤S5还包括：

在执行所述监控任务时，当所述监控任务满足告警条件时，则通过短信和/或邮件的方式发送告警信息。

较佳地，所述当所述服务器中的一第一服务器争抢到所述监控令牌后的步骤之后还包括：