[发明专利]实时任务的数据校准方法及装置

说明书

本发明公开了一种实时任务的数据校准方法，包括步骤：对实时任务的多个历史实时数据进行分时间段的离线计算，得到与各时间段对应的离线计算结果；根据离线计算结果，对实时任务在当前时间段内的实时数据结果进行校准处理，得到实时任务在当前时间段内的展示数据结果。本发明实施例还公开了一种实时任务的数据校准装置。上述技术方案中的一个技术方案通过对实时任务在当前时间段之前的历史实时数据进行分时间段的离线计算处理，得到对应各时间段的离线计算结果；调用离线计算结果对当前时间段内的实时数据结果进行校准处理得到实时任务用于当前时间段的展示数据结果。从而实现实时展示的数据结果更准确的目的，用户体验更好。

技术领域

本发明涉及实时数据计算技术领域，特别是涉及一种实时任务的数据校准方法及装置。

背景技术

随着现代商业和信息化的发展，对于数据的计算处理要求，例如数据处理速度、处理规模以及处理的精度等方面，都在逐步提高。对于互联网+商业的场合，例如商场或者网站等，通常会需要及时掌握用户量、交易量、偏好数据或者点击量等关键数据情况，以便及时进行决策调整。为了获得及时的关键数据反馈，主流的技术是通过实时任务系统，例如Storm(分布式实时平台)流计算框架进行实时计算，以得到所需的关键数据反馈。然而，传统的实时任务系统中的数据由于存在短暂的延时性，以及计算框架可能出现任务崩溃的异常，从而，得到实际计算结果存在偏差。

发明内容

基于上述分析，有必要针对传统的实时任务系统所得实际计算结果存在偏差的问题，提供一种实时任务的数据校准方法以及一种实时任务的数据校准装置。

本发明实施例提供一种实时任务的数据校准方法，包括步骤：

对实时任务的多个历史实时数据进行分时间段的离线计算，得到与各时间段对应的离线计算结果；

根据所述离线计算结果，对所述实时任务在当前时间段内的实时数据结果进行校准处理，得到所述实时任务在当前时间段内的展示数据结果。

在其中一个实施例中，根据所述离线计算结果，对所述实时任务在当前时间段内的实时数据结果进行校准处理，得到所述实时任务在当前时间段内的展示数据结果的步骤前，还包括步骤：

根据所述当前时间段内的实时数据结果，确定所述实时任务的执行状态；

根据所述执行状态确定所述校准处理的预定方案；其中，所述预定方案包括结合处理或数据预测模拟处理。

在其中一个实施例中，所述展示数据结果包括校准数据结果；

根据所述离线计算结果，对所述实时任务在当前时间段内的实时数据结果进行校准处理，得到所述实时任务在当前时间段内的展示数据结果的步骤中，包括：

在确定所述实时任务的执行状态为正常状态时，对上一时间段的所述离线计算结果与所述当前时间段内的实时数据结果进行结合处理，得到所述校准数据结果。

在其中一个实施例中，所述结合处理包括指标直接加和处理或指标净值加和处理。

在其中一个实施例中，所述展示数据结果包括模拟数据结果；

根据所述离线计算结果，对所述实时任务在当前时间段内的实时数据结果进行校准处理，得到所述实时任务在当前时间段内的展示数据结果的步骤中，还包括：

获取所述当前时间段前的各时间段校准后的所述实时数据结果；其中，校准后的所述实时数据结果为根据所述各时间段对应的离线计算结果，对对应的所述各时间段内的所述实时数据结果进行校准，得到校准后的所述实时数据结果；

在确定所述实时任务的执行状态为异常状态时，根据各校准后的所述实时数据结果进行数据预测模拟处理，得到所述模拟数据结果。

在其中一个实施例中，所述时间段的时长大于或等于15分钟。