[发明专利]业务数据同步方法及装置、非易失性存储介质、处理器

说明书

本发明公开了一种业务数据同步方法及装置、非易失性存储介质、处理器。其中，该方法包括：在监听到源数据库中的业务数据更新时，将获取到的待推送数据转存至目标消息队列；当同步转化服务程序监听上述目标消息队列中的上述待推送数据时，依据上述推送数据的数据表类型对上述待推送数据进行转化处理，得到转化后待推送数据，其中，所述转化后待推送数据的数据结构与目标第三方平台的数据结构对应；采用推送服务程序将上述转化后待推送数据推送至上述目标第三方平台。本发明解决了现有技术中的业务数据同步方法，无法同时兼顾对源数据库的监听和对变化数据的同步处理的技术问题。

技术领域

本发明涉及数据处理领域，具体而言，涉及一种业务数据同步方法及装置、非易失性存储介质、处理器。

背景技术

在第三方服务快速发展的背景下，越来越多的情况需要引进第三方厂商提供的服务或为其他厂商提供服务。通常情况下，双方数据的数据结构可能存在较大差异，在数据迁移时会造成大量人力物力的投入，使成本的提高。

现有技术中的一种数据转化方法及系统中，采用了利用读取工具从源数据库中读取数据的方式获取待转化数据，但是，当源数据库数据更新时，无法同时兼顾对源数据库的监听和对变化数据的转化同步处理。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种业务数据同步方法及装置、非易失性存储介质、处理器，以至少解决现有技术中的业务数据同步方法，无法同时兼顾对源数据库的监听和对变化数据的同步处理的技术问题。

根据本发明实施例的一个方面，提供了一种业务数据同步方法，包括：在监听到源数据库中的业务数据更新时，将获取到的待推送数据转存至目标消息队列；当同步转化服务程序监听上述目标消息队列中的上述待推送数据时，依据上述推送数据的数据表类型对上述待推送数据进行转化处理，得到转化后待推送数据，其中，上述转化后待推送数据的数据结构与目标第三方平台的数据结构对应；采用推送服务程序将上述转化后待推送数据推送至上述目标第三方平台。

可选的，采用监听组件监听上述源数据库中的源数据日志文件，确定上述业务数据是否发生更新，其中，上述监听组件包括：数据库同步监听Canal组件。

可选的，将获取到的待推送数据转存至目标消息队列，包括：获取上述源数据库中的更新后业务数据，以及与上述更新后业务数据对应的更新前业务数据；将上述更新前业务数据和上述更新后业务数据转化为上述待推送数据，其中，上述待推送数据的数据结构为目标消息体结构。

可选的，依据上述推送数据的数据表类型对上述待推送数据进行转化处理，包括：获取上述待推送数据中携带的数据标识信息；基于上述数据标识信息确定上述数据表类型；依据上述数据表类型判断上述待推送数据是否适用本地定制服务，其中，上述本地定制服务基于目标事件监听机制处理待推送数据，并将待推送数据封装成目标事件进行广播；若判断结果为是，则确定与上述数据表类型对应的监听类型，其中，不同的上述监听类型对应不同的事件监听器，上述事件监听器用于在接收到广播后对上述待推送数据进行转化处理。

可选的，若判断结果为否则丢弃上述待推送数据。

可选的，采用推送服务程序将上述转化后待推送数据推送至上述目标第三方平台，包括：采用上述推送服务程序将上述转化后待推送数据转化为目标字符串；通过超文本传输协议Http请求访问上述目标第三方平台的数据接收接口，并采用接口请求工具将上述目标字符串推送至上述数据接收接口，其中，上述目标第三方平台还用于将上述目标字符串存储至本地数据库中。