[发明专利]处理数据的方法和装置

权利要求书

1.一种处理数据的方法，其特征在于，所述方法在包括至少一个计算节点和至少一个化简节点的系统中执行，在每个计算节点中配置有K个传输链路，所述至少一个化简节点上运行K个化简任务，所述K个传输链路与所述K个化简任务一一对应，每个传输链路用于使所对应的化简任务所属的化简节点与所述计算节点连接，所述K个化简任务与K个数据类型一一对应，每个化简任务用于对所对应的数据类型的数据进行化简处理，K≥2，所述方法包括：

所述计算节点获取待处理数据，所述待处理数据是在所述计算节点中运行的至少两个计算任务生成的，所述待处理数据包括至少两种子数据，所述至少两种子数据的数据类型相异；

所述计算节点根据第一子数据的数据类型，传输所述第一子数据，其中，用于传输所述第一子数据的第一传输链路与所述第一子数据的数据类型相对应。

2.根据权利要求1所述的方法，其特征在于，所述计算节点根据第一子数据的数据类型，传输所述第一子数据，包括：

所述计算节点根据第一子数据的数据类型，确定所述第一传输链路；

所述计算节点通过所述第一传输链路传输所述第一子数据。

3.根据权利要求1所述的方法，其特征在于，所述计算节点中配置有K个分区，所述K个分区与所述K个数据类型一一对应，每个分区用于存储所对应的数据类型的数据，所述K个传输链路与所述K个分区一一对应，每个传输链路用于连接所对应的化简节点与所对应的分区，以及

所述计算节点根据第一子数据的数据类型，传输所述第一子数据，包括：

所述计算节点根据所述第一子数据的数据类型确定第一分区，其中，所述第一分区与所述第一子数据的数据类型所对应；

所述计算节点将所述第一子数据保存至所述第一分区；

所述计算节点通过连接于所述第一分区的第一传输链路，传输所述第一子数据。

4.一种处理数据的装置，其特征在于，所述装置配置在包括至少一个化简节点的系统中，所述装置配置有K个传输链路，所述至少一个化简节点上运行K个化简任务，所述K个传输链路与所述K个化简任务一一对应，每个传输链路用于使所对应的化简任务所属的化简节点与所述装置连接，所述K个化简任务与K个数据类型一一对应，每个化简任务用于对所对应的数据类型的数据进行化简处理，K≥2，所述装置包括：

获取单元，用于获取待处理数据，所述待处理数据是在所述装置中运行的至少两个计算任务生成的，所述待处理数据包括至少两种子数据，所述至少两种子数据的数据类型相异；

传输单元，用于根据第一子数据的数据类型，传输所述第一子数据，其中，用于传输所述第一子数据的第一传输链路与所述第一子数据的数据类型相对应。

5.根据权利要求4所述的装置，其特征在于，所述装置还包括：

确定单元，用于根据所述第一子数据的数据类型确定所述第一传输链路；

所述传输单元具体用于通过所述第一传输链路传输所述第一子数据。

6.根据权利要求4所述的装置，其特征在于，所述装置中配置有K个分区，所述K个分区与所述K个数据类型一一对应，每个分区用于存储所对应的数据类型的数据，所述K个传输链路与所述K个分区一一对应，每个传输链路用于连接所对应的化简节点与所对应的分区，所述装置还包括：

确定单元，具体用于根据所述第一子数据的数据类型确定第一分区，其中，所述第一分区与所述第一子数据的数据类型所对应；

存储单元，用于将所述第一子数据保存至所述第一分区；

所述传输单元具体用于通过连接于所述第一分区的第一传输链路，传输所述第一子数据。