[发明专利]AB测试的评估方法及装置、电子设备、存储介质

说明书

本申请提供一种AB测试的评估方法及装置、电子设备、计算机可读存储介质，该方法包括：获取测试评估指令；其中，所述测试评估指令包括场景参数、与场景参数对应的分组策略；依据所述场景参数、与场景参数对应的分组策略，获取与各组对应的浏览数据和反馈数据；根据各组的浏览数据和反馈数据，计算各组的若干评估指标；基于各组的若干评估指标输出评估报告。本申请方案，可自主完成针对AB测试的评估任务，降低了人力成本，并可避免由于人员失误而出现错误的评估结果。

技术领域

本申请涉及计算机技术领域，特别涉及一种AB测试的评估方法及装置、电子设备、计算机可读存储介质。

背景技术

A/B测试是针对互联网产品的对比分析方法。在同一时间段内，将组成成分相同(或相似)的用户划分为不同组，各组采用不同的方案。通过监控各组用户对方案的反馈情况，来判断各组方案的可行性和有效性。目前，对A/B测试不同方案的进行评估时，通常由数据分析师对后台存储的用户行为分析进行统计分析，手工汇总统计数据，并依据统计结果撰写评估报告。评估过程需耗费耗时耗力，且可能由于人员失误而出现错误的评估结果。

发明内容

本申请实施例的目的在于提供一种AB测试的评估方法及装置、电子设备、计算机可读存储介质，用于实现AB测试的自动化评估。

一方面，本申请提供了一种AB测试的评估方法，包括：

获取测试评估指令；其中，所述测试评估指令包括场景参数、与所述场景参数对应的分组策略；

依据所述场景参数、与所述场景参数对应的分组策略，获取与各组对应的浏览数据和反馈数据；

根据各组的浏览数据和反馈数据，计算各组的若干评估指标；

基于各组的若干评估指标输出评估报告。

在一实施例中，所述测试评估指令包括分群策略；

所述依据所述场景参数、与所述场景参数对应的分组策略，获取与各组对应的浏览数据和反馈数据，包括：

针对所述分群策略中每一群体，依据所述场景参数、与场景参数对应的分组策略，获取所述群体内与各组对应的浏览数据和反馈数据。

在一实施例中，所述反馈数据包括订单数据；

在所述根据各组的浏览数据和反馈数据，计算各组的若干评估指标之前，所述方法还包括：

从各组的订单数据中过滤极端价格对应的订单数据。

在一实施例中，在所述根据各组的浏览数据和反馈数据，计算各组的若干评估指标之前，所述方法还包括：

针对各组的每个反馈数据，依据所述反馈数据中的设备标识查找对应的浏览数据；

判断与所述设备标识对应的浏览数据是否携带用户标识；

如果所述设备标识对应的所有浏览数据均不携带用户标识，过滤所述设备标识对应的反馈数据。

在一实施例中，所述分组策略对应对照组和若干实验组，所述反馈数据为订单数据；

所述根据各组的浏览数据和反馈数据，计算各组的若干评估指标，包括：

根据所述对照组和每个实验组的浏览数据和反馈数据，确定所述对照组的转化率、所述实验组的转化率；

根据所述对照组的转化率、浏览数据和反馈数据，每个实验组的转化率、浏览数据和反馈数据，确定每个实验组的若干评估指标。

在一实施例中，所述评估指标包括转化率提升指标和GMV提升指标，所述方法还包括：

判断所述实验组的转化率提升指标和GMV提升指标是否满足指定条件；