[发明专利]一种判断数据段连续性的方法及其系统

权利要求书

1.一种判断数据段连续性的方法，用于Spark流处理进行数据分析，其特征在于，所述方法包括：

将获取的多条数据段按获取时间顺序进行排序；

判断相邻两条数据段是否连续，计算前一条数据段的段尾时间与后一条数据段的段首时间的时间差值；

若时间差值小于或等于预设时间值，则判定所述两条数据段连续，若相邻两条数据段连续，则将两条数据段合并成新数据段，以进行Spark流处理；

若时间差值大于预设时间值，则判定所述两条数据段不连续；

将前一条数据段的段首作为新数据段的段首，将后一条数据段的段尾作为新数据段的段尾，判断获取的所有数据段之间的连续性，得到若干条互不连续的数据段，对得到的若干条互不连续的数据段进行编号，所述编号以获取时间的顺序进行排序，编号即为数据段的段ID，段ID作为数据段的唯一标识，处在相同数据段的数据是满足连续性的，并且满足连续性的数据有相同的段ID，处在不同数据段的数据是不满足连续性的，并且不满足连续性的数据有不同的段ID；

所述数据为机器故障数据。

2.一种判断数据段连续性的系统，其用于权利要求1所述的判断数据段连续性的方法，其特征在于，所述系统包括：

获取模块，用于获取需进行定位处理的多条数据段；

排序模块，用于对获取的多条数据段按获取时间顺序进行排序；

判断模块，用于判断相邻两条数据段是否连续；

合并模块，用于将判断为连续的两条数据段合并为新数据段，以进行Spark流处理；将前一条数据段的段首作为新数据段的段首，将后一条数据段的段尾作为新数据段的段尾，判断获取的所有数据段之间的连续性，得到若干条互不连续的数据段；

编号模块，用于对得到的若干条互不连续的数据段进行编号，所述编号以获取时间的顺序进行排序，编号即为数据段的段ID，段ID作为数据段的唯一标识，处在相同数据段的数据是满足连续性的，并且满足连续性的数据有相同的段ID，处在不同数据段的数据是不满足连续性的，并且不满足连续性的数据有不同的段ID；

所述数据为机器故障数据。