[发明专利]数据同步方法和装置

说明书

本说明书一个实施例提供了一种数据同步方法和装置，其中方法包括：获取待读取数据和待读取数据的源数据库对应的数据读取规律；根据待读取数据的数据量、设定时刻的网络质量参数和数据读取规律，确定在设定时刻时待读取数据对应的数据读取策略，并根据数据读取策略从源数据库中读取待读取数据；根据待读取数据确定待向目标数据库写入的待写入数据，并获取目标数据库对应的数据写入规律；根据待写入数据的数据量、设定时刻的网络质量参数和数据写入规律，确定在设定时刻时待写入数据对应的数据写入策略，并根据数据写入策略将待写入数据写入目标数据库。通过本实施例能够解决通过预先配置的数据同步规则进行数据同步数据同步效率低的问题。

技术领域

本文件涉及数据库技术领域，尤其涉及一种数据同步方法和装置。

背景技术

目前经常需要将一个数据库中的数据同步至另一个数据库，比如将mysql数据库中的某个数据表同步至Oracle数据库中。现有技术中，可以通过datax、SymmetricDs等同步工具基于预先配置好的数据同步规则进行数据同步。然而，由于在每次进行数据同步时，预先配置的数据同步规则是固定不变的，但是每次进行数据同步的数据同步场景是变化的，比如每次进行数据同步的网络质量和待同步数据量是变化的，且源数据库的类型和目标数据库的类型也是变化的，因此预先配置好的数据同步规则与具体的数据同步场景可能不相匹配，通过预先配置好的数据同步规则进行数据同步，具有数据同步效率低的问题。

发明内容

本说明书一个实施例的目的是提供一种数据同步方法和装置，以解决通过预先配置好的数据同步规则进行数据同步所具有的数据同步效率低的问题。

为解决上述技术问题，本说明书一个实施例是这样实现的：

第一方面，本说明书一个实施例提供了一种数据同步方法，包括：

获取待读取数据和所述待读取数据的源数据库对应的数据读取规律；其中，所述数据读取规律中记录有所述源数据库在各个预设网络质量参数下各个预设数据读取量所对应的数据读取耗时；

根据所述待读取数据的数据量、设定时刻的网络质量参数和所述数据读取规律，确定在所述设定时刻时所述待读取数据对应的数据读取策略，并根据所述数据读取策略从所述源数据库中读取所述待读取数据；

根据读取出来的所述待读取数据确定待向目标数据库写入的待写入数据，并获取所述目标数据库对应的数据写入规律；其中，所述数据写入规律中记录有所述目标数据库在各个预设网络质量参数下各个预设数据写入量所对应的数据写入耗时；

根据所述待写入数据的数据量、设定时刻的网络质量参数和所述数据写入规律，确定在所述设定时刻时所述待写入数据对应的数据写入策略，并根据所述数据写入策略将所述待写入数据写入所述目标数据库。

第二方面，本说明书另一个实施例提供了一种数据同步装置，包括：

第一获取模块，用于获取待读取数据和所述待读取数据的源数据库对应的数据读取规律；其中，所述数据读取规律中记录有所述源数据库在各个预设网络质量参数下各个预设数据读取量所对应的数据读取耗时；

数据读取模块，用于根据所述待读取数据的数据量、设定时刻的网络质量参数和所述数据读取规律，确定在所述设定时刻时所述待读取数据对应的数据读取策略，并根据所述数据读取策略从所述源数据库中读取所述待读取数据；

第二获取模块，用于根据读取出来的所述待读取数据确定待向目标数据库写入的待写入数据，并获取所述目标数据库对应的数据写入规律；其中，所述数据写入规律中记录有所述目标数据库在各个预设网络质量参数下各个预设数据写入量所对应的数据写入耗时；

数据写入模块，用于根据所述待写入数据的数据量、设定时刻的网络质量参数和所述数据写入规律，确定在所述设定时刻时所述待写入数据对应的数据写入策略，并根据所述数据写入策略将所述待写入数据写入所述目标数据库。