[发明专利]流处理中数据阻塞的处理系统、方法、介质及设备

摘要

本发明提供了一种流处理中数据阻塞的处理系统、方法、介质及设备，包括：派发器模块：接收数据流并分发至处理器模块；处理器模块：根据预设计算逻辑对数据进行计算；聚合器模块：接收所有处理器的计算结果，根据数据进入派发器模块的时间顺序进行排序；监控器模块：监控所有的处理器模块的状态，对判定为异常的处理器模块进行异常恢复；状态管理模块：保存处理器模块的运行状态，将处理器模块的计算逻辑与数据状态进行分离，在处理器模块重建后对计算逻辑和数据状态进行恢复。本发明通过重启处理器模块的方式以最小的代价对系统进行异常恢复，仅丢弃导致阻塞的数据，极大减少了异常恢复的代价。