[发明专利]分布式动态调度方法、装置、电子设备及存储介质

权利要求书

1.一种分布式动态调度方法，其特征在于，所述方法包括：

调度节点获取数据处理请求，并将所述数据处理请求加入请求缓冲队列进行缓存；

所述调度节点执行调度操作为所述数据处理请求选择出目标处理节点，将所述数据处理请求下发给所述目标处理节点，其中，所述调度操作包括高可用调度、均衡调度或亲和性调度；

若所述数据处理请求是所述目标处理节点未处理的会话，则所述目标处理节点通过分布式状态缓存对所述数据处理请求的会话的配置信息和状态信息进行同步，包括：从所述分布式状态缓存中，获取所述数据处理请求的会话的配置信息和状态信息；将所述数据处理请求的会话的配置信息和状态信息同步到本地，所述配置信息包括所述会话的输入数据源、处理结果的存储路径和回调接收者，所述状态信息包括所述会话处理的偏移量；其中，所述分布式状态缓存用于对所有会话的所述配置信息和状态信息进行存储和维护；

所述目标处理节点对所述数据处理请求进行处理，并向所述调度节点同步所述数据处理请求的处理状态。

2.根据权利要求1所述的方法，其特征在于，所述调度节点将所述数据处理请求加入请求缓冲队列进行缓存，包括：

将所述数据处理请求加入处理等待队列；

从所述处理等待队列中取出所述数据处理请求进行下发操作，若所述数据处理请求下发成功，则将所述数据处理请求加入ACK等待队列；若下发失败，则将所述数据处理请求放回所述处理等待队列。

3.根据权利要求1所述的方法，其特征在于，所述调度节点执行调度操作为所述数据处理请求选择出目标处理节点，包括：

获取候选处理节点集合；

若所述数据处理请求的会话在所述分布式状态缓存中属于第一类别会话，则进行均衡调度从所述候选处理节点集合中选择出所述目标处理节点；

若所述数据处理请求的会话在所述分布式状态缓存中属于第二类别会话，则从所述候选处理节点集合中将所述数据处理请求的会话的上一次处理节点选为所述目标处理节点；

若所述数据处理请求的会话在所述分布式状态缓存中属于第二类别会话，且所述数据处理请求的会话的上一次处理节点已失效，则进行均衡调度从所述候选处理节点集合中选择出所述目标处理节点。

4.根据权利要求3所述的方法，其特征在于，所述调度节点获取候选处理节点集合，包括：

初始化所述候选处理节点集合为空；

对节点信息库中的所有处理节点进行遍历，将处于准备状态的处理节点加入所述候选处理节点集合。

5.根据权利要求2所述的方法，其特征在于，所述目标处理节点向所述调度节点同步所述数据处理请求的处理状态，包括：

从所述数据处理请求的处理状态中获取所述数据处理请求的会话标识；

若所述处理状态为成功，则向所述调度节点发送ACK信息，所述ACK信息携带有所述数据处理请求的会话标识；

若所述处理状态为失败，则向所述调度节点发送NACK信息，所述NACK信息携带有所述数据处理请求的会话标识。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

所述调度节点在接收到所述ACK信息的情况下，确定完成所述数据处理请求的处理；

所述调度节点在接收到所述NACK信息的情况下，将所述数据处理请求从所述ACK等待队列移回所述处理等待队列；

若所述数据处理请求在所述ACK等待队列中等待的时间超过预设时间，则所述调度节点将所述数据处理请求从所述ACK等待队列移回所述处理等待队列；

若所述数据处理请求在所述ACK等待队列中等待的时间未超过预设时间，则不做任何处理，继续等待。