[发明专利]一种基于大数据的数据同步方法及装置

摘要

本发明实施例提供了一种基于大数据的离线同步方法及装置，所述方法包括当接收到将第一目标数据源与第二目标数据源进行数据同步的指令后，将访问第一目标数据源所需的第一访问信息以参数的形式发送给Data Reader，DataReader依据该参数读取第一目标数据源中的待同步数据，并将该数据保存为第一数据抽象，依据预设的处理逻辑将第一数据抽象进行转换；将访问第二目标数据源所需的第二访问信息以参数的形式发送给DataWriter；DataWriter依据该参数将转换后的数据抽象写入第二目标数据源。因此，该过程无需用户手动的进行同步的不同数据源的不同接口类型中不断的切换，不仅操作简便而且节省了成本。

主权项

一种基于大数据的同步方法，其特征在于，所述方法包括：当接收到将第一目标数据源与第二目标数据源进行数据同步的指令后，将访问所述第一目标数据源所需的第一访问信息以参数的形式发送给DataReader；所述DataReader依据所述第一访问信息对应的参数，从所述第一目标数据源中读取待同步的数据，并将所述待同步数据保存为第一数据抽象；依据预设的处理逻辑将所述第一数据抽象转换成第二数据抽象；其中，所述预设的处理逻辑为用户自定义设置的；将访问所述第二目标数据源所需的第二访问信息以参数的形式发送给DataWriter；所述DataWriter依据所述第二访问信息对应的参数，将所述第二数据抽象写入所述第二目标数据源。