[发明专利]数据处理方法及装置

说明书

本申请涉及一种数据处理方法及装置，包括：响应于针对触发源的选择操作，确定第一触发源，其中，所述触发源中所存储的数据用于触发实时任务；在不存在所述第一触发源的情况下，获取针对第一触发源的创建信息；根据针对所述第一触发源的创建信息，从目标数据源中得到特征数据，以根据所述特征数据创建所述第一触发源。根据本申请实施例提供的数据处理方法及装置，可以节省人力资源，提高数据利用率。

技术领域

本申请涉及数据处理技术领域，尤其涉及一种数据处理方法及装置。

背景技术

对于不同业务的数据处理过程中，可能涉及到访问相同的数据，这就使得会执行多次对日志文件进行解析，以获得同一数据的情况，数据利用率低，且浪费人力资源。

发明内容

根据本申请的一方面，提供了一种数据处理方法，包括：

响应于针对触发源的选择操作，确定第一触发源，其中，所述触发源中所存储的数据用于触发实时任务；

在不存在所述第一触发源的情况下，获取针对第一触发源的创建信息；

根据针对所述第一触发源的创建信息，从目标数据源中得到特征数据，以根据所述特征数据创建所述第一触发源。

在一种可能的实现方式中，所述创建信息中包括目标数据源及第一触发源中的第一字段，所述根据针对所述第一触发源的创建信息，从目标数据源中得到特征数据，以根据所述特征数据创建所述第一触发源，包括：

实时从所述目数据源中获取第一触发数据；

根据所述第一字段对所述第一触发数据进行字段解析处理，得到第一字段对应的特征数据；

将所述第一字段对应的特征数据写入所述第一触发源。

在一种可能的实现方式中，所述方法还包括：

根据所述第一触发源的所述特征数据，创建第二触发源。

在一种可能的实现方式中，所述根据所述第一触发源的所述特征数据，创建第二触发源，包括：

响应于针对所述第一触发源的扩展操作，得到所述第二触发源的第二字段；

从与所述第一触发源具有相同主键的第三触发源中获取所述第二字段对应的特征数据；

响应于针对所述第二触发源的创建操作，创建所述第二触发源；

将所述第一字段对应的特征数据及所述第二字段对应的特征数据，写入所述第二触发源。

在一种可能的实现方式中，所述方法还包括：

响应于针对所述第一触发源或者第二触发源的特征数据的选择操作，确定第一目标字段；

实时从所述第一触发源或第二触发源中获取所述第一目标字段对应的目标特征数据；

根据所述第一目标字段对应的目标特征数据，创建第四触发源。

在一种可能的实现方式中，触发源包括实体类型信息，对应同一实体类型的触发源具有关联关系。

在一种可能的实现方式中，所述方法还包括：

在存在所述第一触发源的情况下，根据所述第一触发源中的特征数据，创建实时任务。

在一种可能的实现方式中，所述根据所述第一触发源中的特征数据，创建实时任务，包括：

响应于针对实时子任务的选择操作，确定至少一个目标实时子任务，所述实时子任务包括第二目标字段及对所述第二目标字段对应的特征数据进行处理的处理模块，其中，所述第二目标字段为所述第一触发源中的字段和/或与所述第一触发源对应同一实体类型的触发源中的字段；