[发明专利]一种全量数据比对方法、装置、设备及存储介质

权利要求书

1.一种全量数据比对方法，其特征在于，应用于协调服务器，所述协调服务器分别与分布式集群的每个服务节点通信连接，每个服务节点中存储有全量比对数据；所述方法包括：

获得服务节点与比对数据对应关系；

将所述服务节点与比对数据对应关系下发给所述分布式集群的每个服务节点，以使每个服务节点根据所述服务节点与比对数据对应关系，遍历所述全量比对数据，将各自对应的比对数据加载到内存中；

在接收到数据比对指令的情况下，将比对目标下发给所述分布式集群的每个服务节点，以使每个服务节点将各自内存中的比对数据与所述比对目标进行比对。

2.根据权利要求1所述的方法，其特征在于，在所述将比对目标下发给所述分布式集群的每个服务节点之前，还包括：

确定所述分布式集群是否处于服务可用状态；

如果是，则执行所述将比对目标下发给所述分布式集群的每个服务节点的步骤。

3.根据权利要求2所述的方法，其特征在于，所述确定所述分布式集群是否处于服务可用状态，包括：

确定在所述协调服务器中为每个服务节点创建的临时节点是否均存在；

如果均存在，则确定所述分布式集群处于服务可用状态。

4.根据权利要求3所述的方法，其特征在于，还包括：

在接收到任意一个服务节点的缓存反馈信息的情况下，为相应服务节点创建对应的临时节点，所述缓存反馈信息为所述相应服务节点将对应的比对数据均加载到内存后发出的信息；

在任意一个服务节点离线的情况下，移除相应服务节点对应的临时节点。

5.根据权利要求1所述的方法，其特征在于，还包括：

在所述分布式集群中有服务节点变更，且变更后的所述分布式集群中每个服务节点存储有所述全量比对数据的情况下，更新所述服务节点与比对数据对应关系；

重复执行所述将所述服务节点与比对数据对应关系下发给所述分布式集群的每个服务节点的步骤。

6.根据权利要求5所述的方法，其特征在于，所述更新所述服务节点与比对数据对应关系，包括：

在所述分布式集群中有服务节点离线，使用新节点替换离线节点的情况下，将所述服务节点与比对数据对应关系中所述离线节点的标识替换为所述新节点的标识；

在所述分布式集群中有服务节点离线，使用原有在线节点替补离线节点的情况下，确定所述分布式集群中每个在线节点的剩余内存占比；根据所述剩余内存占比，在所述在线节点中确定所述离线节点的替补节点；将所述服务节点与比对数据对应关系中所述离线节点对应的比对数据分配给所述替补节点；

在所述分布式集群中没有服务节点离线，但增加有新节点的情况下，根据所述分布式集群中每个服务节点的内存占用比例，更新所述服务节点与比对数据对应关系。

7.根据权利要求1至6之中任一项所述的方法，其特征在于，还包括：

获得每个服务节点反馈的比对结果；

根据所述比对结果，确定并输出所述比对目标的匹配结果。

8.一种全量数据比对装置，其特征在于，应用于协调服务器，所述协调服务器分别与分布式集群的每个服务节点通信连接，每个服务节点中存储有全量比对数据；所述装置包括：

对应关系获得模块，用于获得服务节点与比对数据对应关系；

对应关系下发模块，用于将所述服务节点与比对数据对应关系下发给所述分布式集群的每个服务节点，以使每个服务节点根据所述服务节点与比对数据对应关系，遍历所述全量比对数据，将各自对应的比对数据加载到内存中；

数据比对模块，用于在接收到数据比对指令的情况下，将比对目标下发给所述分布式集群的每个服务节点，以使每个服务节点将各自内存中的比对数据与所述比对目标进行比对。

9.一种全量数据比对设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述全量数据比对方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述全量数据比对方法的步骤。