[发明专利]基于pyspark的自动化测试方法、装置、计算机设备及存储介质

说明书

本发明涉及大数据技术领域，揭露了一种基于pyspark的自动化测试方法、装置、计算机设备及存储介质。所述方法包括：定时获取任务调度平台中的遗漏监测任务；在运行所述遗漏监测任务时，获取预设编辑平台中编写的pyspark逻辑，通过pyspark逻辑执行与多个数据集群分别对应的自动化测试脚本，并通过所述自动化测试脚本对各数据集群中的监测数据进行监测，得到监测结果；通过任务流程展示平台将所述监测结果展示至预设接收平台。本发明用于提升数据交互，进而提升数据展示能力以及通过提升自动化测试效率。

技术领域

本发明涉及大数据中的数据处理技术领域，尤其揭露了一种基于pyspark的自动化测试方法、装置、计算机设备及存储介质。

背景技术

大数据作为当前热门的新兴技术之一，在各大企业的使用越来越广泛，自动化测试技术是通过工具记录或者编写脚本的方式模拟手工测试的过程，通过回收或运行脚本来执行测试案例，从而代替人工对产品系统的验证，避免人工大量进行重复性工作，但目前大数据中的自动化测试技术还存在部分不足，其在自动化测试以及可视化方面尚不完善，进而导致大数据开发、测试门槛高，处理流程繁琐，自动化测试效率低下的问题；另外，其大数据对应的生态新系统的组件相对独立，各组件之间的数据交互机制也不完善，进而导致数据交互相对困难，开发的任务不能进行有效管理以及友好展示的问题。

综上，本领域技术人员亟需寻找一种新的方案来解决上述问题。

发明内容

基于此，有必要针对上述技术问题，提供一种基于pyspark的自动化测试方法、装置、计算机设备及存储介质，用于提升数据交互，进而提升数据展示能力以及通过流程互相配合，提升自动化测试效率。

一种基于pyspark的自动化测试方法，包括：

定时获取任务调度平台中的遗漏监测任务；

在运行所述遗漏监测任务时，获取预设编辑平台中编写的pyspark逻辑，通过pyspark逻辑执行与多个数据集群分别对应的自动化测试脚本，并通过所述自动化测试脚本对各数据集群中的监测数据进行监测，得到监测结果；

通过任务流程展示平台将所述监测结果展示至预设接收平台。

一种基于pyspark的自动化测试装置，包括：

获取模块，用于定时获取任务调度平台中的遗漏监测任务；

监测模块，用于在运行所述遗漏监测任务时，获取预设编辑平台中编写的pyspark逻辑，通过pyspark逻辑执行与多个数据集群分别对应的自动化测试脚本，并通过所述自动化测试脚本对各数据集群中的监测数据进行监测，得到监测结果；

展示模块，用于通过任务流程展示平台将所述监测结果展示至预设接收平台。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述一种基于pyspark的自动化测试方法。

一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述一种基于pyspark的自动化测试方法。

上述基于pyspark的自动化测试方法、装置、计算机设备及存储介质，基于任务调度平台、预设编辑平台和任务流程3个主要模块之间的互相配合，在将监测任务进行运行后，通过预设编辑平台中编写的pyspark逻辑执行与多个数据集群分别对应的自动化测试脚本，得到各个数据集群对应的监测结果，最终将监测结果进行可视化展示，提升处理流程的数据交互能力，整体流程上可避免流程中数据交互不完善的问题，进而提升数据展示能力以及大数据自动化测试和开发的效率；同时通过任务调度平台、预设编辑平台和任务流程展示缩减大多数繁琐的处理流程，固化处理流程，后续可重复利用该工具执行处理流程，提高自动化测试的效率。

附图说明