[发明专利]数据库中数据的复制方法、装置、系统和介质

说明书

本公开提供了一种数据库中数据的复制方法，包括：获取数据库的日志文件；从日志文件中确定多个字符串，多个字符串中的每个字符串指示数据库的一条操作记录；根据预设复制清单，确定多个字符串中的目标字符串；以及将目标字符串经由中间件发送至目标数据库，完成数据库中数据的复制。本公开还提供了一种数据库中数据的复制装置、一种计算机系统和一种计算机可读存储介质。

技术领域

本公开涉及数据处理领域，更具体地，涉及一种数据库中数据的复制方法、装置、系统和介质。

背景技术

随着国家信息科技产业规划及安全可控战略的实施，计算机信息系统需要朝着“自主可控、安全可信、高效可用”的目标迈进。因此，各信息系统纷纷开展IT架构转型工作，例如将集中式系统架构向分布式系统架构转变。其中，数据库转型是信息系统转型中最基础、最重要及最核心的一个环节，各应用系统的核心数据库逐渐从DB2或ORACLE数据库向开源的分布式数据库(例如MySQL数据库)进行转型。

在实现本公开构思的过程中，发明人发现相关技术中至少存在以下问题：在MySQL数据库的普及使用过程中，各级应用系统对于跨应用的数据快速共享提出了更多的使用需求。相关技术中，通常根据上游应用的业务需求将MySQL数据库中的数据导出到文件，以文件方式供下游应用使用。或者，采用MySQL的异步/半同步模式，通过备份数据库来实现数据共享。该些方法往往需要开发人员编写大量的程序才能实现文件或数据地共享，从而导致数据的使用时效性较差，且该些方法是基于数据库级别的数据同步，因此会存在冗余数据被复制共享的情况。

发明内容

有鉴于此，本公开提供了一种提高数据库中数据复制的时效性和实现细粒度准确复制的数据库中数据的复制方法和装置。

本公开一方面提供了一种数据库中数据的复制方法，包括：获取数据库的日志文件；从日志文件中确定多个字符串，多个字符串中的每个字符串指示数据库的一条操作记录；根据预设复制清单，确定多个字符串中的目标字符串；以及将目标字符串经由中间件发送至目标数据库，完成数据库中数据的复制。

可选地，从日志文件中确定多个字符串包括：解析日志文件，以从日志文件中提取得到多串二进制码，该多串二进制码中的每串二进制码指示数据库的一条操作记录；以及转换多串二进制码，得到多个字符串。

可选地，获取数据库的日志文件包括：根据预配置的IP地址，确定IP地址属于预配置的IP地址的数据库为源数据库；以及获取源数据库的日志文件。

可选地，数据库中数据的复制方法还包括：根据获取日志文件的时刻、确定每个字符串的时刻、确定得到目标字符串的时刻及发送目标字符串的时刻，确定复制数据的统计信息；以及在统计信息不满足信息阈值的情况下，产生告警信息。其中，统计信息包括以下至少之一：速率、延迟时长。

可选地，数据库包括针对第一应用的数据库；经由中间件发送至目标数据库的目标字符串用于供第二应用获取，其中，目标字符串指示述第一应用和第二应用共享的数据，第二应用为第一应用的下游应用。

可选地，数据库包括MySQL数据库；中间件包括分布式的消息中间件。

本公开的另一方面提供了一种数据库中数据的复制装置，包括：文件获取模块，用于获取数据库的日志文件；字符串确定模块，用于从日志文件中确定多个字符串，多个字符串中的每个字符串指示数据库的一条操作记录；字符串筛选模块，用于根据预设复制清单，确定多个字符串中的目标字符串；以及发送模块，用于将目标字符串经由中间件发送至目标数据库，完成数据库中数据的复制。

可选地，上述字符串确定模块包括：解析子模块，用于解析日志文件，以从日志文件中提取得到多串二进制码，该多串二进制码中的每串二进制码指示数据库的一条操作记录；以及转换子模块，用于转换多串二进制码，得到多个字符串。