[发明专利]计算节点数据容灾回放的方法、终端设备及存储介质

摘要

本发明公开一种计算节点数据容灾回放的方法，包括如下过程，设置磁盘目录的过程，设置检查点文件备份的频率的过程，数据进入计算节点的过程，数据被计算节点处理的过程，计算节点异常时的数据回放的过程。一种计算节点数据容灾回放的终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现计算节点数据容灾回放的方法的步骤。一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现计算节点数据容灾回放的方法的步骤。不仅实现了计算节点的高性能数据容灾问题，还解决了在数据恢复回放的时效问题。

主权项

1.一种计算节点数据容灾回放的方法，其特征在于：包括如下过程：设置磁盘目录的过程：设置WAL日志文件和检查点文件所存储的磁盘目录，使得能够利用多线程并行操作的方式进行WAL日志文件的读写和提升检查点文件的可用性，其中检查点文件用于数据回放时WAL日志文件的定位；设置检查点文件备份的频率的过程：根据计算节点的数据处理速度设置检查点文件备份的频率；数据进入计算节点的过程：先将数据的数据体插入计算节点内存的主队列的尾部，然后将该数据的入队信息，记录到设置磁盘目录的过程中设置的WAL日志文件的磁盘目录下的对应WAL日志文件中，再将WAL日志文件对应的文件ID和在磁盘的偏移位置记录到计算节点内存的从队列中，作为从队列数据，最后按照设置检查点文件备份的频率的过程中设置的检查点文件备份的频率，定期将计算节点内存的从队列中的从队列数据直接复制，该从队列数据作为检查点文件存储到设置磁盘目录的过程中设置的磁盘目录下，并删除原检查点文件中的数据，进行检查点文件备份；数据被计算节点处理的过程：先从计算节点内存的主队列头部删除该条数据体，再往WAL日志文件中写入一条处理删除记录，并删除掉计算节点内存的从队列头部的该条数据体对应的从队列数据，若数据处理过程失败，需将删除的该条数据恢复，则按照数据进入计算节点的过程对数据进行恢复；计算节点异常时的数据回放的过程：当计算节点异常时，根据检查点文件对WAL日志文件进行定位，进行数据的恢复。