[发明专利]数据处理方法、装置、计算机设备以及存储介质

说明书

本发明实施例公开了一种数据处理方法、装置、计算机设备以及存储介质，其中，所述方法包括：确定系统中用户设定的执行时长内未处理数据的总量；预先设置系统中每一待创建的线程处理的数据量；根据所述未处理数据的总量以及所述每一待创建的线程处理的数据量，计算出在用户所设定的执行时长内用于处理所述未处理数据所需的线程数量；根据计算出的线程数量，利用预设规则创建线程，并根据所创建的线程处理所述未处理数据。本发明实施例能够提高数据处理的效率，可以尽快消除积压数据，以降低积压的数据对系统资源的影响。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据处理方法、装置、计算机设备以及存储介质。

背景技术

在系统中处理大量数据时，由于待处理数据量变化幅度较大，但对数据处理的时效要求很高，并尽可能使资源使用平稳，防止资源使用冲高的现象。固定的线程数量必须根据最大的数据量预估出需要分配的最大处理线程进行处理，在数据量较小的时候也会占用最大线程，导致资源冲高，影响系统稳定。

发明内容

有鉴于此，本发明实施例提供一种数据处理方法、装置、计算机设备以及存储介质，能够提高数据处理的效率，可以尽快消除积压数据，以降低积压的数据对系统资源的影响。

一方面，本发明实施例提供了一种数据处理方法，该方法包括：

确定系统中用户设定的执行时长内未处理数据的总量；

预先设置系统中每一待创建的线程处理的数据量；

根据所述未处理数据的总量以及所述每一待创建的线程处理的数据量，计算出在用户所设定的执行时长内用于处理所述未处理数据所需的线程数量；

根据计算出的线程数量，利用预设规则创建线程，并根据所创建的线程处理所述未处理数据。

另一方面，本发明实施例提供了一种数据处理装置，所述装置包括：

第一确定单元，用于确定系统中用户设定的执行时长内未处理数据的总量；

第一设置单元，用于预先设置系统中每一待创建的线程处理的数据量；

第一计算单元，用于根据所述未处理数据的总量以及所述每一待创建的线程处理的数据量，计算出在用户所设定的执行时长内用于处理所述未处理数据所需的线程数量；

处理单元，用于根据计算出的线程数量，利用预设规则创建线程，并根据所创建的线程处理所述未处理数据。

又一方面，本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的数据处理方法。

再一方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者一个以上计算机程序，所述一个或者一个以上计算机程序可被一个或者一个以上的处理器执行，以实现如上所述的数据处理方法。

本发明实施例提供一种数据处理方法、装置、计算机设备以及存储介质，其中方法包括：确定系统中用户设定的执行时长内未处理数据的总量；预先设置系统中每一待创建的线程处理的数据量；根据所述未处理数据的总量以及所述每一待创建的线程处理的数据量，计算出在用户所设定的执行时长内用于处理所述未处理数据所需的线程数量；根据计算出的线程数量，利用预设规则创建线程，并根据所创建的线程处理所述未处理数据。本发明实施例能够提高数据处理的效率，可以尽快消除积压数据，以降低积压的数据对系统资源的影响。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。