[发明专利]基于事务日志分析的单导系统中mysql数据库同步技术

说明书

本发明公开了基于事务日志分析的单导系统中mysql数据库同步技术，该发明使用分析mysql数据库事务日志binlog的方法，先把单导系统模拟成源mysql数据库的从库，读取二进制日志流，然后结合mysql提供的binlog格式文档，对日志流进行解析，实现单导系统中内外端mysql数据库同步。

技术领域

本发明涉及一种互联网通信技术领域，特别涉及基于事务日志分析的单导系统中mysql数据库同步技术。

背景技术

单导系统是一种数据信息网络安全隔离系统，具有数据信息的单向导入功能。单导系统由内端和外端组成，外端模块TX只发送数据，内端模块RX只接收数据，数据信息只能从单导外端导入到单导内端。

单导系统的mysql数据库同步要实现两个安全隔离的网络的跨平台的数据库信息单向同步，实现过程是单导的数据库同步模块从外端mysql数据库获取数据生成数据文档，由单导系统发送模块将文档传入单导内端，再由单导内端的数据库同步模块把数据同步到目标数据库。

由于单向隔离特性不能使用数据库自带外部连接功能来传递数据库数据，现在常用的技术大多是通过触发器或select查询获取数据，本方案综合考虑各中实现方式优劣，采用解析mysql事务日志binlog的方式，分析操作数据，生成的数据写入文档，再由单导系统进行同步。

发明内容

为克服上述现有技术的不足，解决现有技术中单导系统中mysql数据库同步采用触发器或选择数据同步方案会对源数据库造成巨大负担和压力的缺点，采用了分析mysql事务日志binlog，解析出操作数据，再组装成sql语句同步到目标数据库的方案，实现单导系统获取mysql数据库数据时不占用源数据库资源和不对源数据库造成压力和负担的目的。根据单导系统的特点，该发明分成单导外端和单导内端部分。

单导外端部分包括：

1.日志读取模块：通过对mysql数据库事务日志binlog进行读取，并接收读取到的二进制日志流。

2.日志分析模块：把日志读取模块获取的二进制日志流进行解析，并转换成json格式。

3.外端数据发送模块：用于把数据发送到单导内端。

单导内端部分包括：

1.内端数据接收模块：用于接收单导外端发送过来的数据。

2.数据格式转换模块：把从外端接收到的json格式数据转换成sql格式。

3.数据库同步模块：把转换模块得到的sql格式语句同步到目标数据库。

本发明技术方案带来的有益效果：

本发明中使用的事务日志解析法进行单导系统的数据库同步，能够避免占用源数据库资源，由于绕过了对源数据库的操作，纯粹对二进制的日志流进行解析，获取数据的速度极快，完全能够满足当前各种mysql大型生产环境数据库的同步要求，而且具有时延短、高吞吐量的特点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1是本发明提出的实施流程图；

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。