[发明专利]一种数据并行处理方法

权利要求书

1.一种数据并行处理方法，其特征在于，该方法包括如下步骤：

S1：获取用户需求；

S2：中控单元对用户需求进行通用分配并创建需求请求。

2.根据权利要求1所述的数据并行处理方法，其特征在于，所述步骤S2具体为：将所述用户需求划分一个或者多个子用户需求，基于所述一个或者多个子用户需求创建子需求请求。

3.根据权利要求2所述的数据并行处理方法，其特征在于，所述将所述用户需求划分一个或者多个子用户需求，具体为：

获取所述用户需求中的所有操作类型的数量，获取数量排名前N位的操作类型，如果所述排名前N位的操作类型占全部操作数量的百分比超过第一百分比阈值，则从所有可用执行资源中选择2个可用执行资源，基于所述2个可用执行资源将所述用户需求划分成2个子用户需求，将所述2个子用户需求分配给所述2个可用执行资源，并相应的创建子需求请求；

否则，直接从现有可用执行资源中选择等待队列最短的可用执行资源，并将所述用户需求直接分配给所述可用执行资源，并相应的创建需求请求。

4.根据权利要求3所述的数据并行处理方法，其特征在于，通过聚类的方法获取所述用户需求中的所有操作类型的数量。

5.根据权利要求4所述的数据并行处理方法，其特征在于，所述第一百分比阈值为预设值。

6.根据权利要求5所述的数据并行处理方法，其特征在于，所述从所有可用执行资源中选择2个可用执行资源，具体为：

计算所有可用执行资源的可用指数，从中选择可用指数最高的1可用执行资源，计算所有可用执行资源的协调指数，并选择协调指数最高的1个可用执行资源，将所述可用指数最高的1个可用执行资源和所述协调指数最高的1个可用执行资源作为所选择的2个可用执行资源。

7.根据权利要求6所述的数据并行处理方法，其特征在于，所述计算所有可用执行资源的可用指数，具体为：

获取所有可用执行资源类型执行能力N元组(OPT_1,j…OPT_i,j…OPT_N,j)，其中OPT_i,j为第j个可用执行资源针对第i种操作类型的操作能力；

获取所有可用执行资源的排队队列长度QL和综合处理能力CPB；QL_j为第j个可用执行资源的排队队列长度；CPB_j为第j个可用执行资源的综合处理能力；

获取用户需求中的数量排名前N位的操作类型构成的N元组(OPN₁…OPN_i…OPN_N)，OPN_i为第i种操作类型的数量；

基于下式(3)和(4)计算第j个可用执行资源的可用指数AVF_j；

8.根据权利要求7所述的数据并行处理方法，其特征在于，所述计算所有可用执行资源的协调指数，具体为：基于下式(5)计算所述第j个可用执行资源的协调指数DLF_j；

DFF_j＝W1×CPCP_j+W2×STCP_j+W3×CMCP_j (5)；

其中：W1，W2，W3为调整权重；W+W2+W3＝1，且W3>W2>W1；CPCP_j，STCP_j，CMCP_j分别为第j个可用执行资源的计算能力、存储能力和通信能力。