[发明专利]一种流计算应用的测试方法、装置及设备

说明书

本发明实施例提供了一种流计算应用的测试方法、装置及设备，应用于大数据技术领域，其中，该方法可以获取配置参数，配置参数包括测试数据包参数，测试数据包参数包参数用于指示指定的读取数据源所对应的测试数据包；测试数据包包含文本形式的测试数据；指定的读取数据源是运行流计算应用时所需的读取数据源；根据测试数据包参数，从测试数据包参数所指示的测试数据包中获取测试数据；基于从测试数据包中获取的测试数据对流计算应用进行测试，并输出测试得到的测试结果数据。通过本发明实施例提供的流计算应用的测试方法、装置及设备，能够提高针对测流计算应用的测试效率。

技术领域

本发明涉及大数据技术领域，特别是涉及一种流计算应用的测试方法、装置及设备。

背景技术

流计算属于大数据处理(计算)类技术，与存储不同，其特点是不负责存储数据，流计算应用可以理解为应用流计算实现的应用。具体地，流计算应用从读取数据源读取数据，对数据进行处理，然后将处理后的数据输出至输出数据源。如此使得，流计算应用在整体运行或者测试时，会依赖读取数据源和输出数据源。

流计算通常是基于分布式技术实现的，现有方式中，针对流计算应用进行测试的过程中，读取数据源和输出数据源均通过分布式存储系统实现，具体地，准备好测试数据，并将测试数据存储至分布式存储系统实现的读取数据源中，在基于该测试数据对流计算应用进行测试后，将得到的测试结果数据输出至分布式存储系统实现的输出数据源。可以看出，现有方式中，流计算应用需要分别与分布式存储系统进行交互才能读取测试数据以及输出处理后的数据，而与分布式存储系统的交互一般都比较复杂，如此会使得针对流计算应用的测试效率较低。

发明内容

本发明实施例的目的在于提供一种流计算应用的测试方法、装置及设备，以提高针对测流计算应用的测试效率。具体技术方案如下：

第一方面，本发明实施例提供了一种流计算应用的测试方法，包括：

获取配置参数，所述配置参数包括测试数据包参数，所述测试数据包参数包参数用于指示指定的读取数据源所对应的测试数据包；所述测试数据包包含文本形式的测试数据；所述指定的读取数据源是运行流计算应用时所需的读取数据源；

根据所述测试数据包参数，从所述测试数据包参数所指示的所述测试数据包中获取测试数据；

基于从所述测试数据包中获取的测试数据对流计算应用进行测试，并输出测试得到的测试结果数据。

可选的，所述输出测试得到的测试结果数据，包括：

将所述测试结果数据输出至日志；或者，

在标准输出中打印所述测试结果数据；或者，

将所述测试结果数据展示在可视化界面。

可选的，所述配置参数还包括环境参数，所述环境参数用于表示当前环境是测试环境还是线上运行环境；

在所述根据所述测试数据包参数，从所述测试数据包参数所指示的所述测试数据包中获取测试数据之前，所述方法还包括：

根据所述环境参数判断当前环境是否是测试环境；

所述根据所述测试数据包参数，从所述测试数据包参数所指示的所述测试数据包中获取测试数据，包括：

当所述环境参数表示所述当前环境是测试环境时，则根据所述测试数据包参数，从所述测试数据包参数所指示的所述测试数据包中获取测试数据。

可选的，在所述根据所述环境参数判断当前环境是否是测试环境之后，所述方法还包括：

当所述环境参数表示所述当前环境是线上运行环境时，则从所述指定的读取数据源中读取测试数据；

基于从所述读取数据源中读取的测试数据运行所述流计算应用，并将运行得到的运行结果输出至输出数据源。