[发明专利]AB测试的评估方法及装置、电子设备、存储介质在审
| 申请号: | 202110887411.7 | 申请日: | 2021-08-03 |
| 公开(公告)号: | CN113609013A | 公开(公告)日: | 2021-11-05 |
| 发明(设计)人: | 王佳琳;刘磊;陈先进 | 申请(专利权)人: | 挂号网(杭州)科技有限公司 |
| 主分类号: | G06F11/36 | 分类号: | G06F11/36 |
| 代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 李飞 |
| 地址: | 311200 浙江省杭州市萧山区萧山*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | ab 测试 评估 方法 装置 电子设备 存储 介质 | ||
1.一种AB测试的评估方法,其特征在于,包括:
获取测试评估指令;其中,所述测试评估指令包括场景参数、与所述场景参数对应的分组策略;
依据所述场景参数、与所述场景参数对应的分组策略,获取与各组对应的浏览数据和反馈数据;
根据各组的浏览数据和反馈数据,计算各组的若干评估指标;
基于各组的若干评估指标输出评估报告。
2.根据权利要求1所述方法,其特征在于,所述测试评估指令包括分群策略;
所述依据所述场景参数、与所述场景参数对应的分组策略,获取与各组对应的浏览数据和反馈数据,包括:
针对所述分群策略中每一群体,依据所述场景参数、与场景参数对应的分组策略,获取所述群体内与各组对应的浏览数据和反馈数据。
3.根据权利要求1所述的方法,其特征在于,所述反馈数据包括订单数据;
在所述根据各组的浏览数据和反馈数据,计算各组的若干评估指标之前,所述方法还包括:
从各组的订单数据中过滤极端价格对应的订单数据。
4.根据权利要求1所述的方法,其特征在于,在所述根据各组的浏览数据和反馈数据,计算各组的若干评估指标之前,所述方法还包括:
针对各组的每个反馈数据,依据所述反馈数据中的设备标识查找对应的浏览数据;
判断与所述设备标识对应的浏览数据是否携带用户标识;
如果所述设备标识对应的所有浏览数据均不携带用户标识,过滤所述设备标识对应的反馈数据。
5.根据权利要求1所述的方法,其特征在于,所述分组策略对应对照组和若干实验组,所述反馈数据为订单数据;
所述根据各组的浏览数据和反馈数据,计算各组的若干评估指标,包括:
根据所述对照组和每个实验组的浏览数据和反馈数据,确定所述对照组的转化率、所述实验组的转化率;
根据所述对照组的转化率、浏览数据和反馈数据,每个实验组的转化率、浏览数据和反馈数据,确定每个实验组的若干评估指标。
6.根据权利要求5所述的方法,其特征在于,所述评估指标包括转化率提升指标和GMV提升指标,所述方法还包括:
判断所述实验组的转化率提升指标和GMV提升指标是否满足指定条件;
如果是,将所述实验组作为下一阶段的对照组。
7.根据权利要求5所述的方法,其特征在于,所述评估指标包括转化率提升率和GMV提升率;
所述根据所述对照组的转化率、浏览数据和反馈数据,每个实验组的转化率、浏览数据和反馈数据,确定每个实验组的若干评估指标,包括:
根据所述对照组的转化率,以及每个实验组的转化率,确定每个实验组的转化率提升率;
根据所述对照组的转化率、浏览数据和反馈数据,以及每个实验组的转化率、浏览数据和反馈数据,确定所述对照组的相对GMV和每个实验组的相对GMV;
根据所述对照组的相对GMV和每个实验组的相对GMV,确定每个实验组的GMV提升率。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
基于所述对照组的相对GMV和所述实验组的相对GMV,确定所述实验组对应的全年销售额提升量。
9.一种电子设备,其特征在于,所述电子设备包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行权利要求1-8任意一项所述的AB测试的评估方法。
10.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序可由处理器执行以完成权利要求1-8任意一项所述的AB测试的评估方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于挂号网(杭州)科技有限公司,未经挂号网(杭州)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110887411.7/1.html,转载请声明来源钻瓜专利网。





