[发明专利]测试结果分析方法、装置和电子设备

说明书

本发明公开了一种测试结果分析方法、装置、电子设备及计算机可读介质，该方法包括：获取测试案例中用于分析测试结果的多个指标；按照多个指标，从测试案例产生的结果数据中查找与多个指标匹配的指标数据；根据指标数据，生成对测试结果分析报告。根据本发明的技术方案，实现了测试案例结果自动分析，为用户提供了测试结果分析报告，提升了测试案例管理的效率。

技术领域

本发明涉及计算机信息处理领域，具体而言，涉及一种测试结果分析方法、装置、电子设备及计算机可读介质。

背景技术

应用于计算机领域的测试方法多种多样，例如常见的A/B-test(A/B测试)，其为Web或App界面或流程制作两个(A/B)或多个(A/B/n)版本，在同一时间维度，分别让组成成分相同(相似)的访客群组(目标人群)随机的访问这些版本，收集各群组的用户体验数据和业务数据，最后分析、评估出最好版本，正式采用。A/B-test的适用范围广泛，由于A/B-Test的测试案例逐渐增多，且有些A/B-Test观察周期长，久而久之，需要管理和跟进的A/.B-Test测试案例就会堆积如山，为了跟踪这些测试案例，就会耗费大量的时间和精力。

因此，如何实现大量A/B-Test测试结论的自动化跟踪管理，并基于假设检验的结构给出决策建议，提高A/B-Test测试案例的管理效率，就成为需要解决的问题。

发明内容

本发明旨在实现对测试案例的自动管理并完成结果分析。

为了解决上述技术问题，本发明第一方面提出一种测试结果分析方法，所述方法包括：获取所述测试案例中用于分析测试结果的多个指标；按照所述多个指标，从所述测试案例产生的结果数据中查找与所述多个指标匹配的指标数据；根据所述指标数据，生成对测试结果分析报告。

根据本发明的一种优选实施方式，所述获取所述测试案例中用于分析测试结果的多个指标，包括：根据所述测试用例的唯一标识，查找预设的与所述测试案例对应的指标模板，所述指标模板中记录了用于分析测试结果的所述多个指标。

根据本发明的一种优选实施方式，所述获取所述测试案例中用于分析测试结果的多个指标，包括：根据用户提出的分析需求，从所述测试案例中设置的指标中筛选出符合所述分析需求的多个指标，用于分析测试结果。

根据本发明的一种优选实施方式，所述获取所述测试案例中用于分析测试结果的多个指标，包括：根据用户参与的业务环节，从所述测试案例中设置的指标中筛选出与所述业务环节相关的多个指标，用于分析测试结果。

根据本发明的一种优选实施方式，在所述获取所述测试案例中用于分析测试结果的多个指标之前，还包括：根据所述测试案例对应的测试时间，判断测试工作当前是否已经完成，并在判断结果为是时，执行所述获取所述测试案例中用于分析测试结果的多个指标。

为了解决上述技术问题，本发明第二方面提出一种测试结果分析装置，所述装置包括：指标获取模块，获取所述测试案例中用于分析测试结果的多个指标；数据查找模块，按照所述多个指标，从所述测试案例产生的结果数据中查找与所述多个指标匹配的指标数据；报告生成模块，根据所述指标数据，生成对测试结果分析报告。

根据本发明的一种优选实施方式，所述指标获取模块根据所述测试用例的唯一标识，查找预设的与所述测试案例对应的指标模板，所述指标模板中记录了用于分析测试结果的所述多个指标。

根据本发明的一种优选实施方式，所述指标获取模块根据用户提出的分析需求，从所述测试案例中设置的指标中筛选出符合所述分析需求的多个指标，用于分析测试结果。

根据本发明的一种优选实施方式，所述指标获取模块根据用户参与的业务环节，从所述测试案例中设置的指标中筛选出与所述业务环节相关的多个指标，用于分析测试结果。