[发明专利]日切场景的流式数据处理方法及装置

权利要求书

1.一种日切场景的流式数据处理方法，其特征在于，所述方法包括：

获取流式数据，并根据所述流式数据的驱动系统运算类型，对所述流式数据进行数据分流处理，确定所述流式数据的处理模式；

根据所述流式数据的处理模式，确定所述流式数据对应的窗口最迟到达时间；

对所述流式数据对应的窗口最迟到达时间进行窗口聚合运算，生成运算结果，并对所述运算结果进行数据发送处理。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据预设的窗口时间，确定所述流式数据中的迟到数据；

根据所述迟到数据对应的窗口最迟到达时间，对所述迟到数据进行迟到数据分析处理及迟到数据发送处理。

3.根据权利要求1所述的方法，其特征在于，所述根据所述流式数据的驱动系统运算类型，对所述流式数据进行数据分流处理，确定所述流式数据的处理模式包括：

若所述流式数据的驱动系统运算类型为系统时间类型，则确定所述流式数据的处理模式为系统时间处理模式；

若所述流式数据的驱动系统运算类型为时间戳类型，则确定所述流式数据的处理模式为事件时间处理模式。

4.根据权利要求3所述的方法，其特征在于，所述根据所述流式数据的处理模式，确定所述流式数据对应的窗口最迟到达时间包括：

若所述流式数据的处理模式为系统时间处理模式，则根据所述流式数据对应的系统时间及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间；

若所述流式数据的处理模式为事件时间处理模式，则根据所述流式数据对应的事件时间及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间。

5.根据权利要求4所述的方法，其特征在于，所述根据所述流式数据对应的系统时间及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间包括：

根据所述流式数据对应的系统时间及进入系统延时时间，确定所述流式数据对应的时间戳；

根据所述流式数据对应的时间戳及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间。

6.根据权利要求4所述的方法，其特征在于，所述根据所述流式数据对应的系统时间及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间还包括：

根据所述流式数据对应的系统时间及进入系统延时时间，确定所述流式数据对应的系统时间与进入系统延时时间之间的差值，并将其作为所述流式数据对应的时间戳；

根据所述时间戳及预设的最大允许事件超时时间，确定所述时间戳与最大允许事件超时时间之间的差值，并将其作为所述流式数据对应的窗口最迟到达时间。

7.根据权利要求4所述的方法，其特征在于，所述根据所述流式数据对应的事件时间及预设的最大允许事件超时时间，确定所述流式数据对应的窗口最迟到达时间包括：

根据所述流式数据对应的事件时间及预设的最大允许事件超时时间，确定所述事件时间与最大允许事件超时时间之间的差值，并将其作为所述流式数据对应的窗口最迟到达时间。

8.一种日切场景的流式数据处理装置，其特征在于，所述装置包括：

分流处理模块，用于获取流式数据，并根据所述流式数据的驱动系统运算类型，对所述流式数据进行数据分流处理，确定所述流式数据的处理模式；

到达时间模块，用于根据所述流式数据的处理模式，确定所述流式数据对应的窗口最迟到达时间；

数据处理模块，用于对所述流式数据对应的窗口最迟到达时间进行窗口聚合运算，生成运算结果，并对所述运算结果进行数据发送处理。

9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7任一项所述方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至7任一项所述方法的计算机程序。