[发明专利]一种数据处理方法及相关设备

说明书

本申请实施例公开了一种数据处理方法及相关设备，用于调整服务最大并发量，保证服务器不会因为过载而发生故障的同时，尽可能多的利用硬件资源。该方法包括：获取当前时间窗口内的采样样本；根据当前时间窗口内的采样样本确定当前时间窗口的第一每秒查询率QPS；根据第一QPS以及预设的QPS更新策略更新目标时间窗口的极限QPS；根据当前时间窗口内的采样样本确定当前时间窗口内的采样样本的第一平均时延；根据第一平均时延以及预设的平均时延更新策略更新当前存储的低负载时的目标平均时延；根据目标时间窗口的极限QPS以及更新后的目标平均时延确定目标最大并发量；基于目标最大并发量调整目标时间窗口的最大并发量。

技术领域

本申请涉及通信领域，特别涉及一种数据处理方法及相关设备。

背景技术

单个服务器的极限处理能力都是存在极限的，当接收请求的速度超过服务自身的极限处理能力时，请求会在服务端不断积压，最终服务会因为超载而出现故障。为了避免这种情况的发生，人们设计了各式各样的限流技术，以保护服务不会超载。

当前主流的限流方案依旧是为服务的并发量或者每秒接收的请求数量配置一个最大值。在微服务时代，服务的拓扑、甚至到硬件资源都是不断变化的。这使得服务的极限处理能力也在不断变化。而配置的固定阈值却不会随着环境的变化而更新，从而使得在环境变化时，服务器将可能面临资源浪费/超载的风险。

发明内容

本申请实施例提供了一种数据处理方法及相关设备，用于调整服务最大并发量，保证服务器不会因为过载而发生故障的同时，尽可能多的利用硬件资源。

本申请实施例第一方面提供了一种数据处理方法，包括：

获取当前时间窗口内的采样样本；

根据所述当前时间窗口内的采样样本确定所述当前时间窗口的第一每秒查询率QPS；

根据所述第一QPS以及预设的QPS更新策略更新目标时间窗口的极限QPS，所述目标时间窗口为所述当前时间窗口的下一时间窗口；

根据所述当前时间窗口内的采样样本确定所述当前时间窗口内的采样样本的第一平均时延；

根据所述第一平均时延以及预设的平均时延更新策略更新当前存储的低负载时的目标平均时延；

根据所述目标时间窗口的极限QPS以及更新后的所述目标平均时延确定目标最大并发量；

基于所述目标最大并发量调整所述目标时间窗口的最大并发量。

可选地，所述根据所述第一QPS以及预设的QPS更新策略更新目标时间窗口的极限QPS包括：

将所述第一QPS与第二QPS进行对比，得到第一对比结果，所述第二QPS为所述当前时间窗口之前的时间窗口对应的QPS中最大的QPS；

根据所述第一对比结果更新所述目标时间窗口的极限QPS。

可选地，所述根据所述第一对比结果更新所述目标时间窗口的极限QPS包括：

当所述第一对比结果为所述第一QPS大于所述第二QPS时，将所述第一QPS确定为所述目标时间窗口的极限QPS；

当所述第一对比结果为所述第一QPS小于所述第二QPS时，根据第一预设时长内的时间窗口的个数以及所述第一预设时长之前的时间窗口的权重确定平滑系数；

根据所述第一QPS、所述第二QPS以及所述平滑系数更新所述目标时间窗口的极限QPS。

可选地，所述根据所述第一平均时延以及预设的平均时延更新策略更新当前存储的低负载时的目标平均时延包括：

将所述第一平均时延与所述目标平均时延进行对比，得到第二对比结果，所述目标平均时延为第二预设时长内的时间窗口中最低的平均时延；