[发明专利]一种数据库并行回放的控制方法以及控制系统

说明书

本发明提供了一种数据库并行回放的控制方法以及控制系统，所述控制方法包括：创建startup进程以及指定数据量的日志回放进程redo worker以共享内存队列；startup进程从日志文件中按照顺序读取日志记录，根据日志类型是否进行并行回放，如果是则进行哈希运算，根据哈希运算的结果将日志记录分发到相应的redo worker进行回放；redo worker回放进程根据初始化配置进行表级或页级日志回放，在日志回放的同时提供对数据库的只读服务，保证读取的数据在事务中的一致性。本发明的数据库并行回放的控制方法可以有效改善日志回放性能，提高回放速度，以及故障恢复速度等问题。

技术领域

本发明涉及数据库并行回放领域，具体而言，涉及一种数据库并行回放的控制方法以及控制系统。

背景技术

当业务系统对数据库故障恢复以及同步回放时间有较高性能要求时，在串行日志回放已经达到性能优化瓶颈，需要进一步加快日志回放，可以采用调用多任务并行回放的方法，利用处理器并行处理资源，来加速日志回放效率。

串行日志处理的缺点在恢复日志量较大时，故障恢复时间会很长，影响启动时间，进而影响对外提供服务时间。

有鉴于此，特提出本发明。

发明内容

有鉴于此，本发明公开了一种数据库并行回放的控制方法，该方法可以有效改善日志回放性能，提高回放速度，以及故障恢复速度等问题。

具体地，本发明是通过以下技术方案实现的：

第一方面，本发明公开了一种数据库并行回放的控制方法，包括如下步骤：

创建startup进程以及指定数据量的日志回放进程redo worker以共享内存队列；

startup进程从日志文件中按照顺序读取日志记录，根据日志类型是否进行并行回放，如果是则进行哈希运算，根据哈希运算的结果将日志记录分发到相应的redo worker进行回放；

redo worker回放进程根据初始化配置进行表级或页级日志回放，在日志回放的同时提供对数据库的只读服务，保证读取的数据在事务中的一致性。

优选地，在整个并行回放的过程中主要依靠多个进程实现：

postmaster进程，是数据库的主进程，数据库并行回放的控制方法的部分初始化以及启动过程由此进程完成，具体地，根据读取配置信息对相应模块参数进行初始化；启动startup进程入恢复阶段；

startup进程，日志分发进程，此进程主要用于将日志分发到不同的日志回放进程功能；具体地，开启并行恢复：注册并行回放进程，通知postmaster启动redo workers；读取日志：循环读取日志(record)，根据日志参数，将日志分发到redo worker消息队列或在当前进程回放；

redo worker进程，日志回放的工作进程，此进程用于接收并回放startup进程分发的日志，根据配置存在多个实例，用于并行回放日志。

其中startup进程由postmaster进程来控制启动进入恢复阶段，同时startup进程通知postmaster进程启动redo workers，所述postmaster进程负责数据库并行回放的控制方法的初始化以及启动过程。

本发明的方案还包括了功能参数配置的方法，通过配置文件接口提供给用户进行配置，在启动时加载配置到并行处理框架中，功能参数配置项主要包括以下几项：并行回放功能开关，打开或关闭并行回放功能，关闭后为串行回放；设置并线回放数量，用于设置并行回放工作进程的数量；页级并行开关，用于页级并行的开启与关闭，页级关闭默认为表级并行回放；配置并行回放的内存资源，用于配置日志回放工作进程队列内存容量。