[发明专利]一种数据同步方法、装置和系统

说明书

技术领域

本发明实施例涉及数据同步技术领域，尤其涉及一种数据同步方法、装置和系统。

背景技术

现有的企业内部或者企业间的数据同步大多采用两种方式。

第一种方式是通过数据导入导出，即数据提供方根据需求格式导出数据，通过通讯工具传送给数据需求方，数据需求方根据自己的需求加工数据然后导入自己的存储。

第二种方式是通过HTTP(Hyper Text Transfer Protocol)，超文本传输协议)接口调用，数据提供方调用数据需求方的HTTP接口，将数据推送过去，或者数据需求方调用数据提供方的HTTP接口拉取数据。

然而，数据导入导出的方式实时性太低，很难满足现有互联网公司的数据实时同步需求，比如某一应用需要实时显示不同的相关物流公司的物流信息，造成用户体验差。

对于基于接口调用的一种数据同步方式，即数据提供方推送数据给数据需求方的方式，当数据量大以及接口推送失败的时候，数据提供方不仅需要耗费资源进行数据的推送，还需要耗费资源去考虑意外情况及意外情况的处理，比如数据需求方是否成功接收数据完成数据同步，数据需求方接收失败后是否需要重发，何时进行重发等等，造成数据提供方的资源压力大。

对于基于接口调用的另一种数据同步方式，即数据需求方调用数据提供方的接口实时拉取数据的方式，数据需求方并不知道数据提供方何时发生数据变更，若一直不停的从数据提供方拉取数据，不仅会造成数据需求方的资源浪费，也会造成数据提供方的资源压力大。

发明内容

鉴于现有技术中的上述缺陷或不足，期望提供一种数据同步方法、装置和系统，能够在实现数据的实时同步的同时，降低数据提供方和数据需求方的资源压力。

第一方面，本发明实施例提供了一种数据同步方法，包括：

实时获取各数据提供方在发生数据变更时生成的对应的事件通知；

将获取的事件通知添加到事件任务表中；

启动事件消费进程读取所述事件任务表中的事件通知，并将读取的事件通知发送给数据需求方，以供数据需求方根据所述事件通知从所述数据提供方获取变更后的数据。

第二方面，本发明实施例提供了一种数据同步装置，包括：

事件通知获取模块，用于实时获取各数据提供方在发生数据变更时生成的对应的事件通知；

事件通知添加模块，用于将获取的事件通知添加到事件任务表中；

数据同步模块，用于启动事件消费进程读取所述事件任务表中的事件通知，并将读取的事件通知发送给数据需求方，以供数据需求方根据所述事件通知从所述数据提供方获取变更后的数据。

第三方面，本发明实施例还提供了一种数据同步系统，包括：第二方面实施例提供的数据同步装置，以及与所述数据同步装置连接的数据提供方和数据需求方。

第四方面，本发明实施例还提供了一种电子设备，包括处理器、存储器和总线，其中：

所述处理器、所述存储器通过总线完成相互间的通信；

所述处理器可以调用存储器中的计算机程序，以执行第一方面实施例提供的所述数据同步方法。

第五方面，本发明实施例还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现第一方面实施例提供的所述数据同步方法。

本发明实施例提供的数据同步方案中，可以实时获取各数据提供方在发生数据变更时生成的对应的事件通知；将获取的事件通知添加到事件任务表中；启动事件消费进程读取事件任务表中的事件通知，并将读取的事件通知发送给数据需求方，以供数据需求方根据事件通知从数据提供方获取变更后的数据。这样，数据需求方可以在接收到事件通知后及时地向数据提供方获取变更后的数据，无需耗费资源在数据提供方没有发生数据变更时进行无效拉取，降低数据需求方和数据提供方的资源压力。而且，数据提供方也无需耗费资源去关注数据需求方是否成功根据事件通知完成数据同步以及同步失败后的处理，降低了数据提供方的资源压力。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本发明一个实施例的数据同步系统的结构示意图；

图2示出了根据本发明一个实施例的数据同步方法的示例性流程图。