[发明专利]一种数据处理方法、装置、设备及系统

说明书

本说明书实施例公开了一种数据处理方法、装置、设备及系统，所述方法包括：获取目标业务的业务日志；获取所述目标业务的维度配置信息；根据所述维度配置信息，对所述业务日志进行拆分处理，生成与所述维度配置信息相匹配的维度数据；分别对与所述维度配置信息相匹配的维度数据进行统计分析，得到所述维度数据对应的统计分析结果。

技术领域

本说明书涉及计算机技术领域，尤其涉及一种数据处理方法、装置、设备及系统。

背景技术

随着终端技术和网络技术的不断发展，各种数据不断增加，如何对这些数据进行再次利用成为当前的热门话题，进而数据的处理和统计分析越来越被人们所重视。

当前，对某项业务进行统计分析的过程中，需要对该业务的业务指标按照各个不同的维度信息进行数据统计。通常，可以将某业务的一个业务指标按照不同维度信息的要求，分别编写或开发相应的数据处理逻辑，以此来提取相应的维度数据，然后，再按照该业务的预定要求对上述维度数据进行统计分析计算，得到相应的计算结果，并可以将得到的计算结果提供给使用方。

然而，通过上述方式对不同维度信息对应的维度数据进行统计分析的过程中，一方面各个维度信息对应的维度数据清洗逻辑需要单独维护，且开发工作量较大，另一方面当需要增加新的维度信息时，也需要增加或开发新的维度信息的数据处理逻辑，从而使得维度数据统计分析的灵活性和扩展性较差。为此，需要提供一种各个维度信息对应的维度数据处理更简化、开发工作量更少、维度数据统计分析的灵活性和扩展性较好的技术方案。

发明内容

本说明书实施例的目的是提供一种数据处理方法、装置、设备及系统，以提供一种各个维度信息对应的维度数据处理更简化、开发工作量更少、维度数据统计分析的灵活性和扩展性较好的技术方案。

为了实现上述技术方案，本说明书实施例是这样实现的：

本说明书实施例提供的一种数据处理方法，所述方法包括：

获取目标业务的业务日志；

获取所述目标业务的维度配置信息；

根据所述维度配置信息，对所述业务日志进行拆分处理，生成与所述维度配置信息相匹配的维度数据；

分别对与所述维度配置信息相匹配的维度数据进行统计分析，得到所述维度数据对应的统计分析结果。

可选地，所述获取所述目标业务的维度配置信息，包括：

判断本地缓存中是否包含所述目标业务的维度配置信息；

如果所述本地缓存中未包含所述目标业务的维度配置信息，则向数据分析平台发送所述维度配置信息获取请求；

接收所述数据分析平台发送的所述目标业务的维度配置信息，将所述目标业务的维度配置信息存储到所述本地缓存中。

可选地，所述维度数据包括与所述维度配置信息相匹配的维度信息和所述维度信息对应的返回值，所述返回值为在所述维度信息下的数量统计值。

可选地，所述返回值包括页面浏览量、点击量和独立访客量中的一种或多种。

可选地，所述方法还包括：

接收所述目标业务的维度配置信息的修改指令，所述修改指令中包括所述维度配置信息的修改信息；

根据所述维度配置信息的修改信息对所述目标业务的维度配置信息进行修改，得到修改后的维度配置信息。

可选地，所述根据所述维度配置信息，对所述业务日志进行拆分处理，生成与所述维度配置信息相匹配的维度数据，包括：

根据所述维度配置信息，调用用户自定义表生成函数UDTF对所述业务日志进行拆分处理，生成与所述维度配置信息相匹配的维度数据。