[发明专利]数据处理方法、装置、终端设备和存储介质

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

获取待处理的数据；

将所述待处理的数据按照预设分片规则进行分片，得到数据分片，其中，所述数据分片至少包括起始标识和结束标识，所述预设分片规则至少包括业务逻辑、预设长度或预设字节大小中的一种或多种；

将所述数据分片发送至多个服务器，以使所述服务器根据所述起始标识和所述结束标识，获取与所述起始标识和所述结束标识对应的数据分片内容，并执行与所述数据分片内容对应的操作，得到处理结果；

接收多个所述服务器返回的处理结果。

2.根据权利要求1所述的方法，其特征在于，所述将所述待处理的数据按照预设分片规则进行分片，得到数据分片，包括：

根据所述业务逻辑，确定预设个数的基础字段，且所述基础字段是高基数列；

根据所述预设个数的基础字段对所述待处理的数据进行分片，得到多个所述数据分片。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

通过服务器的预设应用程序，采用数据库游标以去重的方式，在预先建立的分片数据库中查找要处理的基础字段，其中，所述预先建立的分片数据库中包括以基础字段进行分片后的各个数据分片，各个数据分片包括数据分片属性和数据分片内容，所述数据分片属性包括所述起始标识和结束标识。

4.根据权利要求3所述的方法，其特征在于，在所述服务器上设置多个业务处理线程，所述将所述数据分片发送至多个服务器，以使所述服务器根据所述起始标识和所述结束标识，获取与所述起始标识和所述结束标识对应的数据分片内容，并执行与所述数据分片内容对应的操作，得到处理结果，包括：

在所述服务器存在空闲的业务处理线程的情况下，在所述预先建立的分片数据库中，查找未执行状态的数据分片；

根据所述未执行状态的数据分片的起始标识和结束标识获取对应的目标数据分片内容；

将所述起始标识、所述结束标识和所述目标数据分片内容发送至存在空闲业务处理线程的目标服务器，以使所述目标服务器采用所述空闲的业务处理线程处理所述目标数据分片内容，得到处理结果，其中，所述处理结果还包括执行状态，所述执行状态至少包括执行中或执行完成中的一种。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

根据所述处理结果中的执行状态，对所述预先建立的分片数据库中的数据分片的状态进行更新。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

将所述预先建立的分片数据库中数据分片的状态为执行完成的数据分片进行业务逻辑处理，得到拼装后的业务数据；

采用数据库的批量提交技术，将所述业务数据保存在所述预先建立的分片数据库。

7.一种数据处理装置，其特征在于，所述装置包括：

获取模块，用于获取待处理的数据；

分片模块，用于将所述待处理的数据按照预设分片规则进行分片，得到数据分片，其中，所述数据分片至少包括起始标识和结束标识，所述预设分片规则至少包括业务逻辑、预设长度或预设字节大小中的一种或多种；

处理模块，用于将所述数据分片发送至多个服务器，以使所述服务器根据所述起始标识和所述结束标识，获取与所述起始标识和所述结束标识对应的数据分片内容，并执行与所述数据分片内容对应的操作，得到处理结果；

统计模块，用于接收多个所述服务器返回的处理结果。

8.根据权利要求7所述的装置，其特征在于，所述分片模块用于：

根据所述业务逻辑，确定预设个数的基础字段，且所述基础字段是高基数列；

根据所述预设个数的基础字段对所述待处理的数据进行分片，得到多个所述数据分片。

9.一种终端设备，其特征在于，包括：至少一个处理器和存储器；

所述存储器存储计算机程序；所述至少一个处理器执行所述存储器存储的计算机程序，以实现权利要求1-6中任一项所述的数据处理方法。

10.一种计算机可读存储介质，其特征在于，该计算机可读存储介质中存储有计算机程序，所述计算机程序被执行时实现权利要求1-6中任一项所述的数据处理方法。