[发明专利]一种数据处理方法、装置以及计算机存储介质

说明书

本申请实施例公开了一种数据处理方法、装置以及计算机存储介质，方法包括：获取第一测试显著水平值以及用户业务数据集合，其中，用户业务数据集合包括多个用户分别对应的多维业务数据；对多个多维业务数据进行划分得到数据组，将数据组组合得到数据组对，所述数据组对包括两组数据组；根据第一测试显著水平值以及数据组对中两组数据组的多维业务数据，确定具有显著差异状态的数据组对的数量，作为显著差异数量；根据显著差异数量，确定第一测试显著水平值对应的总体显著水平值。采用本申请，可以降低总体显著水平值错误率，提高AB实验方法的准确性。

技术领域

本申请涉及互联网技术领域，尤其涉及一种数据处理方法、装置以及计算机存储介质。

背景技术

随着互联网应用渗透到生活的各个方面，人们愈发地重视用户的选择，无论是网页流程的制作，还是应用页面的改版一般都需要做AB测试(即AB test)来验证用户对两组(A/B)版本产品的青睐。一个大规模AB测试系统关注的实验指标有成百上千个，每一个AB实验可能也有10多个关联的指标，而传统的AB测试一次只能对一个指标做实验，远远不能满足互联网产品的需求。

在目前互联网AB测试中，往往需要实验中各指标相互独立，然而实际产品中各指标具有相关联，在这种情况下所确定出的α_per可能会与预期的第一类错误不匹配，进而在使用α_per进行AB测试后，可能会导致实际的第一类错误过大。

发明内容

本申请实施例提供一种数据处理方法、装置以及计算机存储介质，可以保证α_per与第一类错误之间的关系的准确性，更好控制AB测试后的第一类错误。

本申请实施例一方面提供了一种数据处理方法，包括：

获取第一测试显著水平值以及用户业务数据集合，其中，所述用户业务数据集合包括多个用户分别对应的多维业务数据；

对多个所述多维业务数据进行划分得到数据组，将所述数据组组合得到数据组对，所述数据组对包括两组数据组；

根据所述第一测试显著水平值以及所述数据组对中两组数据组的多维业务数据，确定具有显著差异状态的数据组对的数量，作为显著差异数量；

根据所述显著差异数量，确定所述第一测试显著水平值对应的总体显著水平值。

其中，还包括：

将所述第一测试显著水平值与所述总体显著水平值之间的映射关系添加至映射关系表；

所述映射关系表包括多个测试显著水平值分别对应的总体显著水平值，所述多个测试显著水平值包括所述第一测试显著水平值。

其中，所述将所述用户业务数据集合划分得到数据组，将所述数据组组合得到数据组对，每组数据组对包括两组数据组，包括：

确定所述用户业务数据集合随机排序次数N,若所述N小于次数阈值，则对多个所述多维业务数据进行随机排序，对排序后的多个所述多维业务数据进行划分得到数据组，对所述数据组进行两两组合，得到数据组对，直至所述N等于所述次数阈值，得到所有的数据组对。

其中，所述对多个所述多维业务数据进行随机排序，对排序后的多个所述多维业务数据进行划分得到数据组，包括：

对多个所述多维业务数据进行随机排序；

确定每个所述多维业务数据的哈希值；

根据所述哈希值，将排序后的多个所述多维业务数据划分为G组数据组；所述G为偶数。

其中，所述根据所述第一测试显著水平值以及所述数据组对中两组数据组的多维业务数据，确定具有显著差异状态的数据组对的数量，作为显著差异数量，包括：