[发明专利]一种数据库数据同步的方法

说明书

技术领域

本发明涉及一种数据库数据同步的方法，尤其涉及一种数据库数据同步的方法。

背景技术

在大数据时代，数据同步显得越来越重要。不管是数据的加工生产过程中，还是数据的提取和传输过程中，都需要用到数据同步。一套功能完善，稳定性强，自动化水平高的数据同步系统就显得尤为重要。同步系统可以代替人工实现数据从一处到另外一处的转移和重新组织的工作，减少人力成本。对于互联网或金融行业的公司，一套稳定且安全的数据同步系统，可以在很大程度上保障数据的安全性和服务的稳定性。而在实际使用中系统的稳定性及安全性不易保障，无法提供较好的容错性和自动化错误处理，无法实现断点续传，保证数据的完整性和数据同步的稳定性，并且数据同步方式单一，用户体验差，这些都是现有技术中亟待解决的技术问题。

发明内容

为解决上述背景技术中提到的技术问题，本发明提供了一种数据库数据同步的方法，提高同步数据的稳定、高效。

第一方面，一种数据库数据同步的方法，包括：

所述数据同步服务端101验证所述数据同步客户端102登录的账号，所述账号由所述数据同步服务端101授权并分配数据范围；

所述数据同步客户端102向所述数据同步服务端101发送数据同步请求；

所述数据同步服务端101提取依据所述分配数据范围提取源数据库中数据推送至所述数据同步客户端102；

所述数据同步客户端102接收数据并写入到所述目标数据库。

数据同步服务端101只访问数据同步的源数据库，数据同步客户端102只访问数据同步的目标数据库。源数据库与目标数据库相互隔离，且源数据库或者目标数据库都不需要直接接入公共互联网环境，安全性较强，数据同步系统与数据库的耦合性较低。

结合第一方面的第一种可能的实现方式中：

所述数据同步服务端101验证账号通过后，授予所述数据同步客户端102会话token，所述数据同步客户端102向所述数据同步服务端101发送数据同步请求，所述数据同步服务端101验证所述数据同步客户端102的token。

所述token用于数据同步客户端102与数据同步服务端101在整个会话的交互过程中的身份验证。

结合第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中：

所述数据同步客户端102接收数据并写入到所述目标数据库后，所述数据同步服务端101依据同步频率向数据同步客户端102索要token；数据同步服务端101验证所述数据同步客户端102反馈的token；所述数据同步客户端102向所述数据同步服务端101发送数据同步请求。

所述数据同步频率由数据同步服务端101建立账号时预设，所述数据同步频率包括：定时定点同步、时间间隔同步、时间区间里的时间间隔同步。

结合第一方面的第一种和第二种可能的实现的方式，在第一方面的第三种可能的实现方式中：

所述数据同步客户端102向所述数据同步服务端101发送数据同步请求包括：所述数据同步客户端102查找目标库数据中最大时间戳，向所述数据同步服务端101发送同步大于所述最大时间戳的增量数据的数据同步请求。

所述数据同步服务端101提取依据所述分配数据范围提取源数据库中数据推送至所述数据同步客户端102包括：所述数据同步服务端101提取依据所述分配数据范围提取源数据库中时间戳大于所述最大时间戳的增量数据推送至所述数据同步客户端102；所述时间戳用于记录数据写入时间。

所述时间戳用于记录数据写入时间。

第二方面，本发明还提供一种数据库数据同步的方法的系统，所述系统包括数据同步服务端101和数据同步客户端102，其中所述数据同步服务端101包括：

数据同步服务103，实现同步服务端101和数据同步客户端102之间的数据同步操作；

同步调度服务104，单独针对每个数据，控制数据同步的时间和频率；

运营管理平台105，提供可视化环境可以对数据同步服务进行配置；

权限控制服务106，对账户的权限进行控制；

打包报文服务，对从源数据库提取出来的数据按照一定的格式重新组织，使用token进行加密，并且进行压缩；

所述各服务之间通过统一的接口相互调用，同时各服务通过独立发布的方式扩展添加。

其中所述数据同步客户端102包括：