[发明专利]基于数据仓库的用户特征产出方法和系统有效
申请号: | 201910962259.7 | 申请日: | 2019-10-11 |
公开(公告)号: | CN111090708B | 公开(公告)日: | 2023-07-14 |
发明(设计)人: | 周翱;胡研;党孟光;张一丁 | 申请(专利权)人: | 支付宝(中国)网络技术有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/2458 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许振新;朱文杰 |
地址: | 200120 上海市浦东新区中国*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据仓库 用户 特征 产出 方法 系统 | ||
1.一种基于数据仓库的用户特征产出方法,包括:
获取多个用户的交易明细数据并按不同维度将所述交易明细数据分拆成多个子集;
按用户聚合第一维度子集中的数据;
获取用于数据筛选的第二维度,所述第二维度子集对应有与所述第一维度子集相同和不同的维度,所述第二维度子集对应的与所述第一维度不相同的维度的字段值用于确定最终结果,所述第一维度子集对应的与所述第二维度不相同的维度的字段值作为所述最终结果的中间证据信息;
基于所述第二维度子集对应的与所述第一维度子集相同的维度的字段值,将第二维度子集中的数据关联到经聚合的所述第一维度子集中的数据以生成待筛选数据;
基于所述第二维度子集对应的与所述第一维度子集不相同的维度的字段值,筛选所述待筛选数据以获得用户特征;以及
输出所述用户特征、所述第一维度子集中的数据和所述第二维度子集中的数据的至少之一。
2.如权利要求1所述的方法,其特征在于,所述多个子集各自包括键值数据对。
3.如权利要求1所述的方法,其特征在于,所述数据仓库基于Spark、Hadoop、MapReduce、Hive或SQL。
4.如权利要求1所述的方法,其特征在于,按不同维度将所述交易明细数据分拆成多个子集可采用切片或切块的操作。
5.如权利要求1所述的方法,其特征在于,输出所述用户特征、所述第一维度子集中的数据和所述第二维度子集中的数据的至少之一包括:在需要证据时,输出所述用户特征、所述第一维度子集中的数据或所述第二维度子集中的数据。
6.如权利要求2所述的方法,其特征在于,输出所述用户特征、所述第一维度子集中的数据和所述第二维度子集中的数据的至少之一包括:在需要证据时,输出所述用户特征、所述第一维度子集中的键数据和所述第二维度子集中的键数据。
7.一种基于数据仓库的用户特征产出系统,包括:
获取模块,获取多个用户的交易明细数据并按不同维度将所述交易明细数据分拆成多个子集,并且获取用于数据筛选的第二维度;
聚合和关联模块,按用户聚合第一维度子集中的数据,并基于所述第二维度子集对应的与所述第一维度子集相同的维度的字段值,将第二维度子集中的数据关联到经聚合的所述第一维度子集中的数据以生成待筛选数据,所述第二维度子集对应有与所述第一维度子集相同和不同的维度,所述第二维度子集对应的与所述第一维度不相同的维度的字段值用于确定最终结果,所述第一维度子集对应的与所述第二维度不相同的维度的字段值作为所述最终结果的中间证据信息;
筛选模块,基于所述第二维度子集对应的与所述第一维度子集不相同的维度的字段值,筛选所述待筛选数据以获得用户特征;以及
输出模块,输出所述用户特征、所述第一维度子集中的数据和所述第二维度子集中的数据的至少之一。
8.如权利要求7所述的系统,其特征在于,所述多个子集各自包括键值数据对。
9.如权利要求7所述的系统,其特征在于,所述数据仓库基于Spark、Hadoop、MapReduce、Hive或SQL。
10.如权利要求7所述的系统,其特征在于,所述获取模块按不同维度将所述交易明细数据分拆成多个子集可采用切片或切块的操作。
11.如权利要求7所述的系统,其特征在于,所述输出模块输出所述用户特征、所述第一维度子集中的数据和所述第二维度子集中的数据的至少之一包括:在需要证据时,所述输出模块输出所述用户特征、所述第一维度子集中的数据或所述第二维度子集中的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(中国)网络技术有限公司,未经支付宝(中国)网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910962259.7/1.html,转载请声明来源钻瓜专利网。