[发明专利]压测数据过滤方法、装置、存储介质及计算机设备在审
申请号: | 202111534954.7 | 申请日: | 2021-12-15 |
公开(公告)号: | CN114238052A | 公开(公告)日: | 2022-03-25 |
发明(设计)人: | 彭康康 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F16/215;G06F16/22;G06F16/27;G06F21/60 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 姜宇 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 过滤 方法 装置 存储 介质 计算机 设备 | ||
本发明公开了一种压测数据过滤方法、装置、存储介质及计算机设备该方法包括步骤:接收当前测试数据请求,并判断所述当前测试数据请求的数据标识是否存储在布隆过滤器中;若是,确定所述当前测试数据请求为性能压力测试请求,并生成唯一标识符;将所述当前测试数据请求发送至请求的通信接口,并获取所述通信接口基于所述当前测试数据请求生成的业务数据;将生成的业务数据和所述唯一标识符对应存储至业务数据表中;定时根据所述唯一标识符查询所述业务数据表中对应的业务数据,并删除查询到的所述业务数据。本发明可以自动清理性能压力测试造成的脏数据,以减少对常规测试的影响。同时,本发明还涉及区块链技术。
技术领域
本发明涉及数据处理技术领域,尤其涉及一种压测数据过滤方法、装置、存储介质及计算机设备。
背景技术
随着互联网的快速发展,微服务架构的流行,越来越多的公司的系统面向服务化设计,而服务化设计中各服务之间主要通过接口进行交互,接口成为了各系统间通信的通道。
在互联网蓬勃发展的今天,系统的用户量剧增,接口面临压力也剧增,所以,接口的性能压测也变得越来越重要。通过上线前的接口性能压测,可以提前发现系统的性能瓶颈,也可以发现数据库的性能瓶颈。
为了使得压测的效果更真实,一般都会在某个时间点对接口进行大量的压测请求,以推测出接口的性能瓶颈,这样就会产生大量的脏数据存储在数据库中。如果这些脏数据不清理就会一直保存在数据库中,导致数据库表中的数据越来越多,数据表越大,查询效率就越低,从而影响常规测试的进行。
发明内容
基于此,本发明针对现有技术中由于性能压力测试产生大量的脏数据,造成对常规测试的影响的问题,提供了一种压测数据过滤方法、装置、存储介质及计算机设备。
为实现上述目的,本发明提供一种压测数据过滤方法,包括步骤:
接收当前测试数据请求,并判断所述当前测试数据请求的数据标识是否存储在布隆过滤器中;
若是,确定所述当前测试数据请求为性能压力测试请求,并生成唯一标识符;
将所述当前测试数据请求发送至请求的通信接口,并获取所述通信接口基于所述当前测试数据请求生成的业务数据;
将生成的业务数据和所述唯一标识符对应存储至业务数据表中;
定时根据所述唯一标识符查询所述业务数据表中对应的业务数据,并删除查询到的所述业务数据。
进一步的,上述压测数据过滤方法,其中,所述生成唯一标识符的步骤之前还包括:
判断请求的通信接口是否在预设的白名单中;
若否,执行生成唯一标识符的步骤。
进一步的,上述压测数据过滤方法,其中,所述判断所述当前测试数据请求的数据标识是否存储在布隆过滤器中的步骤之前还包括:
获取测试过程中当前测试时间段内性能测试数据请求的数据标识,所述测试过程根据预设的时间划分为多个测试时间段;
根据当前测试时间段内获取的数据标识建立布隆过滤器。
进一步的,上述压测数据过滤方法,其中,所述生成唯一标识符的步骤之后还包括:
将所述唯一标识符存储在压测请求数据表中;
所述定时根据所述唯一标识符查询所述业务数据表中对应的业务数据的步骤包括:
定时根据压测请求数据表中的各个所述唯一标识符查询业务数据表中对应的业务数据。
进一步的,上述压测数据过滤方法,其中,所述删除查询到的所述业务数据的步骤之后还包括:
删除所述压测请求数据表中的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111534954.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种医疗数据的采集方法
- 下一篇:芳香亚磺酸类化合物及其制备方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置