[发明专利]一种数据处理方法及装置

说明书

本发明实施例提供了一种数据处理方法及装置，涉及信息技术领域。本发明实施例通过获取源数据表中预定时间段内的增量数据，生成第一数据集，检测第一数据集中每个目标对象的第一故障数据是否存在于目标数据表中，若不存在，则在目标数据表中插入第一故障数据，提取出目标数据表中没有结束时间的第二故障数据，生成第二数据集，若存在，则直接提取出没有结束时间的第二故障数据，根据第二数据集和第一数据集，更新目标数据表中第二故障数据的结束时间。根据源数据表中的增量数据，向目标数据表中插入第一故障数据，并第二故障数据的结束时间，能够快速的将增量数据合并到目标数据表中，使得用户可以在目标数据表中快速得知故障发生的时刻和时长。

技术领域

本发明涉及信息技术领域，特别是涉及一种数据处理方法及装置。

背景技术

在油田监控系统中，为了正常开采和管理每个油井，对每个油井都会定时进行数据统计，并且根据统计的数据信息初步分析出故障类型。

但是，由于每个油井都是定时进行数据统计的，统计的数据中会存在大量的重复数据，而且统计的数据仅仅是一个状态数据，不方便用户根据统计的数据信息分析故障发生的时刻和时长。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的数据处理方法及装置。

依据本发明的一个方面，提供了一种数据处理方法，包括：

获取源数据表中预定时间段内的增量数据，生成第一数据集；所述第一数据集包括目标对象标识，以及对应的时间信息和状态类型，所述状态类型包括正常状态和至少一个故障类型；

检测所述第一数据集中每个目标对象标识对应的目标对象的第一故障数据是否存在于目标数据表中；所述第一故障数据为所述第一数据集中的每个目标对象第一次出现故障时对应的数据，和/或所述第一数据集中的每个目标对象在正常状态后再次出现故障时对应的数据；

若不存在于所述目标数据表中，则在所述目标数据表中插入所述第一故障数据，并将所述第一故障数据的时间信息作为开始时间；

提取出所述目标数据表中没有结束时间的第二故障数据，生成第二数据集；

若存在于所述目标数据表中，则直接执行所述提取出所述目标数据表中没有结束时间的第二故障数据，生成第二数据集的步骤；

根据所述第二数据集和所述第一数据集，更新所述目标数据表中所述第二故障数据的结束时间。

可选地，所述检测所述第一数据集中每个目标对象标识对应的目标对象的第一故障数据是否存在于目标数据表中的步骤，包括：

检测所述目标数据表中的所述每个目标对象标识对应的目标对象，是否存在与所述第一故障数据属于同一故障类型，且没有结束时间的故障数据；

若存在，则确定所述第一故障数据存在于所述目标数据表中；

若不存在，则确定所述第一故障数据不存在于所述目标数据表中。

可选地，所述根据所述第二数据集和所述第一数据集，更新所述目标数据表中所述第二故障数据的结束时间的步骤，包括：

获取所述第一数据集中，与所述第二故障数据的开始时间间隔最小的、且与所述第二故障数据的状态类型不一样的目标故障数据；

根据所述目标故障数据对应的时间信息，更新所述第二数据集中的第二故障数据的结束时间；

根据所述第二数据集中的第二故障数据的结束时间，更新所述目标数据表中所述第二故障数据的结束时间。

可选地，在所述根据所述第二数据集和所述第一数据集，更新所述目标数据表中所述第二故障数据的结束时间的步骤之后，还包括：