[发明专利]集群脑裂自动修复方法、系统、装置及存储介质

说明书

本申请提供一种MySQL Galera集群脑裂自动修复方法、系统、装置及存储介质，方法包括：当检测到MySQL Galera集群出现的脑裂问题在预设时间段长度内未恢复时，获取MySQL Galera集群出现脑裂问题阶段对应的容器日志和故障信息；根据容器日志、故障信息，基于LogME评估模型，从预设模型库中选取目标修复模型；如果目标修复模型满足预设要求，则采用目标修复模型对MySQL Galera集群出现的脑裂问题进行修复。本方案，当模型库中无脑裂问题对应的容器日志和故障信息无对应的修复模型时，则基于LogME评估，从模型库中选取目标修复方案，从而可以实现自动为脑裂问题选取故障修复模型的目的。

技术领域

本申请涉及集群脑裂自动修复方法、系统、装置及存储介质，属于MySQL Galera集群脑裂自动修复技术领域。

背景技术

随着用于AI平台及深度学习任务的数据业务量的增加，数据存储的压力也与日俱增。尤其是由于平台集群的高可用趋势愈发显著，人们对于mysql的可靠性要求也越来越高。MySQL Galera集群的出现使这一问题得到了解决，在我们的AI平台高可用部署时，mysql在三个主节点上，它们关系对等，multi-master架构做到数据可以多节点同时写入，当节点在其中一个节点出现问题时，可以采用其替代节点代替其提供服务，从而保证集群数据一致。

但是由于平台服务器故障、意外断电、网络抖动、服务异常等情况下，MySQLGalera集群可能出现脑裂情况，导致集群数据不一致；并且在这种情况下，存在无法自动恢复正常的问题。出现这种问题，AI平台底层服务会连接数据库异常，业务数据无法读写入数据库，整体影响较大。

现有技术方案中，MySQL Galera集群修复方法是将两到三种具有代表性的数据库故障和修复方法录入恢复脚本中，当数据库出现指定问题时，可以根据恢复脚本中记录的数据库故障与恢复方法的对应关系选取修复方案进行修复。但当故障日志信息中可能出现的问题不在恢复脚本中时，系统则无法自动恢复。

发明内容

本申请提供了集群脑裂自动修复方法、系统、装置及存储介质，以解决现有技术方案中当故障日志信息中可能出现的问题不在恢复脚本中时，系统则无法自动恢复的技术问题。

第一方面，根据本申请实施例提供一种集群脑裂自动修复方法，包括：

当检测到MySQL Galera集群出现的脑裂问题在预设时间段长度内未恢复时，获取MySQL Galera集群出现脑裂问题阶段对应的容器日志和故障信息；

根据所述容器日志、故障信息，基于预先训练好的LogME评估模型，从预设模型库中选取目标修复模型；

如果所述目标修复模型满足预设要求，则采用目标修复模型对MySQL Galera集群出现的脑裂问题进行修复。

优选地，所述方法，还包括：

根据所述容器日志和故障信息生成目标数据集(targetData)；

所述根据所述容器日志、故障信息，基于预先训练好的LogME评估模型，从预设故障修复模型库中选取目标修复方案，包括：

将所述目标数据集带入存储的每个故障恢复模型，得到每个故障恢复模型对应的恢复结果文件；

基于预先训练好的LogME评估模型，对所述恢复结果文件进行评估，选取最佳恢复结果文件对应的目标修复模型。

优选地，所述如果所述目标修复模型满足预设要求，则采用目标修复模型对MySQLGalera集群出现的脑裂问题进行修复，包括：

针对目标数据集选取预设数量的第一特征点，构成第一特征点集，基于最佳恢复结果对应的故障修复模型，确定第一特定点集对应的第二特征点集；

采用方差计算模型，确定第一特征点集与第二特征点集的方差；