[发明专利]一种用于生成流量指标数据的数据处理方法及装置

说明书

本发明公开了一种用于生成流量指标数据的数据处理方法及装置，其中方法包括：接收流量指标数据的申请请求；从预先设置的指标维度关系表中确定出所申请的流量指标数据的维度和指标的指标维度关系，指标维度关系用于表示维度和指标的组合；按照申请量对所申请的流量指标数据的维度和指标的组合进行优先级排序，生成流量指标表；将所申请的流量指标数据的维度属性与流量指标表进行关联，得到所申请的流量指标数据的维度、维度属性和指标的组合；依据所申请的维度和指标的组合从数据仓库中获取对应的流量指标数据，写入到流量指标表。本发明使指标以流量表出数的方式生成，有利于流量指标的统计和分析。

技术领域

本发明涉及数据处理技术领域，具体涉及一种用于生成流量指标数据的数据处理方法及装置。

背景技术

目前，大数据分析越来越受到青睐，尤其是人工智能兴起的当下，大数据是其重要支撑。对于一些互联网公司，尤其是提供平台的互联网公司，对其数据指标的统计分析，可以为公司的战略决策提供情报基础。

指标数据流具有获取速度快、信息量大、数据不稳定等特点，传统的指标生成方法在进行数据分析时，数据库从用户数据的分析过程中得到的不同指标量，对成千上万条用户数据进行去重和累加计算。然而，这种方式并不能够很好的解决流量统计问题。

发明内容

本发明要解决现有技术无法解决流量统计的技术问题，从而提供一种用于生成流量指标数据的数据处理方法及装置。

本发明的一方面，提供了一种用于生成流量指标数据的数据处理方法，包括：接收流量指标数据的申请请求，其中，所述申请请求携带有所申请的流量指标数据的维度、维度属性和指标；从预先设置的指标维度关系表中确定出所申请的流量指标数据的维度和指标的指标维度关系，所述指标维度关系用于表示维度和指标的组合；按照申请量对所申请的流量指标数据的维度和指标的组合进行优先级排序，生成流量指标表；将所申请的流量指标数据的维度属性与所述流量指标表进行关联，得到所申请的流量指标数据的维度、维度属性和指标的组合；依据所申请的维度和指标的组合从数据仓库中获取对应的流量指标数据，写入到所述流量指标表。

可选地，依据所申请的维度和指标的组合从数据仓库中获取对应的流量指标数据包括：确定所申请的维度和指标的组合对应的SQL语句；执行确定出的所述SQL语句，从所述数据仓库中获取所申请的维度和指标的组合对应的流量指标数据。

可选地，每一个维度和指标的组合对应一个预先编写好的SQL语句。

可选地，确定所申请的维度和指标的组合对应的SQL语句包括：从指标SQL配置表中查找所申请的指标对应的SQL模板，其中，所述指标SQL配置表中配置有指标及其对应的不同维度的SQL模板；按照所申请的维度从查找到的SQL模板中确定出所申请的维度和指标的组合对应的SQL语句。

可选地，依据所申请的维度和指标的组合从数据仓库中获取对应的流量指标数据包括：按照优先级顺序从数据仓库中逐个获取所申请的维度和指标的组合对应的流量指标数据。

可选地，从预先设置的指标维度关系表中确定出所申请的流量指标数据的维度和指标的指标维度关系包括：从维度属性表中获取所申请的流量指标数据的维度名称和维度ID；从指标信息表中获取所申请的流量指标数据的指标名称和指标ID；在所述指标维度关系表中查找获取到的维度名称和维度ID以及指标名称和指标ID以确定出所申请的流量指标数据的维度和指标的组合。

可选地，所述维度属性表配置有维度ID、维度代码、维度名称、维度属性ID、属性值以及属性名称的对应关系。

可选地，所述指标信息表配置有指标分类ID、指标分类代码、指标分类名称、指标ID、指标代码以及指标名称的对应关系。