[发明专利]数据分片处理方法、装置及学分银行服务器

说明书

本发明涉及数据处理技术领域，具体而言，涉及一种数据分片处理方法、装置及学分银行服务器。本发明能够通过获取到的每组交互数据的数据类别和数据容量确定出每组交互数据的分片策略，并确定出每两种分片策略之间的干扰系数，从而根据所有干扰系数的第一平均值对数据类别进行聚类得到多个交互数据聚类，然后根据每个交互数据聚类的数据总容量值与设定值的大小关系采用数据节点分片方法或钩子函数调用方法对每个交互数据聚类进行数据分片。如此，能够将不同组的交互数据的干扰系数考虑在内，从而确保对交互数据进行准确的数据分片处理。

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种数据分片处理方法、装置及学分银行服务器。

背景技术

学分银行（school credit bank，SDB）是一种模拟和借鉴银行的功能特点，使学生能够自由选择学习内容、学习时间、学习地点的一种在线学习管理模式。

学员能够基于学分银行进行自主学习。一般而言，学员通过在终端设备上进行在线学习和测评，以便从学分银行服务器处获得“学分”。“学分”是一种能够在学分银行服务器中进行通信交互的数据，学员可以在学分银行服务器中使用“学分”进行补贴申领和证书认证。

“学分”是学分银行服务器根据学员在终端设备输入的一系列操作指令进行数据处理和逻辑分析得到的，而根据一系列操作指令可能会确定出不同类型和不同大小的数据。因此，如何对根据操作指令确定出的数据进行准确分片从而实现对“学分”的准确确定是现阶段亟待解决的一个技术问题。

发明内容

为了至少克服现有技术中的上述不足，本发明的目的之一在于提供一种数据分片处理方法、装置及学分银行服务器。

本发明实施例的第一方面，提供了一种数据分片处理方法，应用于与终端设备通信的学分银行服务器，所述方法至少包括：

获取基于接收到的所述终端设备发送的操作指令生成的多组交互数据中的每组交互数据的数据类别和数据容量；

根据每组交互数据的数据类别和数据容量确定每组交互数据的分片策略并确定出每两种分片策略之间的干扰系数；

获取确定出的所有干扰系数的第一平均值并根据所述第一平均值对每组交互数据的数据类别进行聚类，得到多个交互数据聚类；

统计每个交互数据聚类的数据总容量值，将数据总容量值超过设定值的交互数据聚类按照数据节点分片方法进行数据分片，将数据总容量值没有超过所述设定值的交互数据聚类按照钩子函数调用方法进行数据分片。

在一种可替换的实施方式中，所述确定出每两种分片策略之间的干扰系数，包括：

确定每种分片策略的分片密度；

针对每两种分片策略，将每两种分片策略中的第一分片策略对应的第一分片密度与第二分片策略对应的第二分片密度进行调换，并确定完成调换的第一分片策略中的第一分片逻辑表单的第一自适应调整参数集以及完成调换的第二分片策略中的第二分片逻辑表单的第二自适应调整参数集；

确定出所述第一自适应调整参数集中的第一目标参数，并从所述第二自适应调整参数集中确定出与所述第一目标参数一致的第二目标参数；

将所述第一自适应调整参数集中的所述第一目标参数进行剔除，得到第一独立参数集，将所述第二自适应调整参数集中的所述第二目标参数进行剔除，得到第二独立参数集；

将所述第一独立参数集和所述第二独立参数集进行融合得到分片参数集并根据所述分片参数集生成与每两种分片策略对应的临时分片指令；

广播所述临时分片指令，以使得目标学分银行服务器接收所述临时分片指令并根据所述临时分片指令中携带的分片逻辑对所述临时分片指令中封装的两组交互数据进行数据分片得到分片结果；