[发明专利]一种数据同步装置、方法、网上交易系统、计算机设备和存储介质

说明书

本发明涉及一种数据同步装置、方法、网上交易系统、计算机设备和存储介质，该装置设置于网上交易系统，该系统还包括商品模块，数据同步装置包含同步数据库增量程序Canal、关系数据库MySQL和消息队列RabbitMQ服务，消息队列RabbitMQ服务与商品模块可以通信，其中，该装置包括：注册模块，用于将同步数据库增量程序Canal注册为关系数据库MySQL的从服务器Slave节点；更新模块，用于当关系数据库MySQL中的数据发生更新时，同步数据库增量程序Canal接收到更新数据；更新信息发送模块，用于同步数据库增量程序Canal通过消息队列RabbitMQ服务，将更新数据发送至商品模块。实现对在对数据同步时，对现有代码无侵入和避免频繁刷库的情况下提高数据同步实时性的目的。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据同步装置、方法、网上交易系统、计算机设备和存储介质。

背景技术

在当前互联网环境中，传统的MySQL到ES(Elasticsearch，非关系型数据库)的数据同步，通常采用数据库队列与调度相结合的方式实现，在需要触发数据同步的地方向数据库队列插入一条数据，通过调度器定时扫描数据库队列的方式实现数据从数据库到ES的同步，这种方式具有实现简单的优点，但是存在代码侵入、频繁刷库、数据同步实时性差等问题，极端情况下，数据库数据同步到ES的延迟可以达到一个调度周期。

因此，建立一种机制，以避免代码侵入和频繁刷库，同时还能保证数据同步实时性更高，是非常迫切的需求。

发明内容

本发明实施例提出了一种数据同步装置、方法、网上交易系统、计算机设备和存储介质，以解决客户端设备在数据通信过程中可能携带恶意程序占用大量网络资源，影响用户数据安全的问题。

第一方面，本发明实施例提供了一种数据同步装置，所述装置设置于网上交易系统，所述系统还包括商品模块，所述数据同步装置包含同步数据库增量程序Canal、关系数据库MySQL和消息队列RabbitMQ服务，所述消息队列RabbitMQ服务与所述商品模块可以通信，其中，所述装置包括：

注册模块，用于将同步数据库增量程序Canal注册为所述关系数据库MySQL的从服务器Slave节点；

更新模块，用于当所述关系数据库MySQL中的数据发生更新时，所述同步数据库增量程序Canal接收到更新数据；

更新信息发送模块，用于所述同步数据库增量程序Canal通过所述消息队列RabbitMQ服务，将所述更新数据发送至所述商品模块。

第二方面，本发明实施例还提供了一种网上交易系统，所述系统包括检索模块、商品模块和第一方面所述的数据同步装置，所述检索模块与所述数据同步装置可以互相通信，所述商品模块与所述数据同步装置可以互相通信，所述检索模块和所述商品模块包括非关系型数据库，其中，

所述检索模块用于：

当接收到对商品信息的访问请求时，从所述非关系型数据库中请求待查询商品的标准化商品信息。

所述商品模块用于：

所述非关系型数据库每隔预设时间段获取商品基础信息后，组装为商品库存数据。

第三方面，本发明实施例还提供了一种数据同步方法，所述方法应用于第二方面所述的网上交易系统，所述方法包括：

将所述同步数据库增量程序Canal注册为所述关系数据库MySQL的从服务器Slave节点；

当所述关系数据库MySQL中的数据发生更新时，所述同步数据库增量程序Canal接收到更新数据；

所述同步数据库增量程序Canal将所述更新数据发送至所述消息队列RabbitMQ服务。