[发明专利]界面关系遍历智能化测试方法、装置、终端及存储介质

说明书

本发明公开了一种界面关系遍历智能化测试方法、装置、终端及存储介质，该测试方法包括获取录制视频；获取界面关系；对图像进行边缘分析和概率霍夫变换提取图形特征；根据界面关系生成界面关系表；根据图形特征的数据与界面关系表进行匹配，对匹配结果与界面关系项的权值进行界面关系的遍历程度的计算，根据预定的遍历程度阈值判断测试是否通过，将判断结果生成测试报告。上述测试方法解决了现有测试无法满足复杂平面几何特性的检测的问题，通过图像识别技术分析图形特征的点、线段、角度关系，代替人工判断，提高精确度，并且能够自定义界面关系，满足复杂界面关系的检测，图像处理技术与遍历测试结合，完成界面关系遍历智能化测试。

技术领域

本发明涉及软件测试技术领域，尤其涉及一种界面关系遍历智能化测试方法、装置、终端及存储介质。

背景技术

近年来，互联网行业发展迅猛，各式各样的应用涌现出来，关系到社会生活的方方面面，与此同时，对于软件应用的测试技术也随之有着越发重要的地位。目前很多行业因为保密的原因，在测试方面并不会有源码的提供，测试者需要对软件的特性进行黑盒测试，针对服务端返回的数据进行测试用例的编写。然而，在图像方面，目前不管是在Web开发还是客户端开发，市面上绘图插件种类繁多，数据格式无法统一。并且因为图像数据的特殊性，测试者很难单纯通过数据测试出图像的具体状态，仅可以判断数据的正确性，并不能保证最后展示的合理性。因此，针对界面特性的新的测试技术在学术界和工业界成为了一个重要的热点问题。

在涉及图形程序的测试中，图像识别技术已经成为了主流方法，这是因为图像的特殊性，从数据层面很难进行真正有效地测试，测试者们于是更加关注通过图像识别，针对软件的界面进行理解测试。目前大部分的图像测试技术都是图像识别和机器学习结合进行的测试，通过人的参与进行标注，结合机器学习，最终将训练出来的模型用于图形的识别处理。但是，因为机器学习需要大量的数据，所以在这方面人工的投入非常高。同时，人存在主观判断问题，如角度的细微偏差，可能会因为人的观察问题，将普通三角形标注为直角三角形；又比如两条线段的平行关系，当线段相差较远时，人很容易主观将不平行的线段视为平行线段。于是，人的主观问题会导致在某些图形类别上出现问题，最常见的是直角、平行关系、长短关系判断的偏差。人的偏差会导致训练数据出现问题，影响模型，最后平面几何的测试结果会出现问题，尤其是在不同类型图形的临界点上，如等边三角形和等腰三角形等。因此，我们希望能够研究一种方法，尽量摆脱人的参与，提高测试的客观性，从而达到提高准确度的目的。

传统的软件测试领域对于界面遍历的测试方法存在偏差，现有测试无法满足复杂平面几何特性的检测。

发明内容

为了克服现有技术的软件测试领域对于界面遍历的测试方法依然不足，本发明提供一种界面关系遍历智能化测试方法、装置、终端及存储介质，其通过图像识别技术分析图形点、线段、角度关系，代替人工判断，提高精确度，并且能够自定义界面关系，满足复杂界面关系的检测。

本发明采用如下技术方案实现：

一种界面关系遍历智能化测试方法，包括：

获取录制视频；

获取预定义和/或自定义的界面关系；

通过图像处理技术，对录制视频中的图像进行边缘分析和概率霍夫变换提取图形特征；

根据预定义和/或自定义的界面关系生成界面关系表；

通过遍历测试技术，根据图形特征的数据与界面关系表进行匹配，对匹配结果与界面关系项的权值进行界面关系的遍历程度的计算，根据预定的遍历程度阈值判断测试是否通过，将判断结果生成测试报告。

可选地，所述图形特征包括点信息、线信息及角信息。

可选地，所述图形特征的提取包括图形边缘提取、直线信息提取及角信息提取。

进一步可选地，所述图形边缘提取的步骤包括：