[发明专利]一种数据处理的方法和装置

说明书

本发明提供一种数据处理方法和装置，建立数据空间，将数据的指针和地址信息存储在所述数据空间；为所述数据空间划分三维以上的空间维度，使计算机的进程运行在所述三维以上的空间维度上，不同空间维度间的进程没有依赖性；该方法的步骤为：通过存储于所述数据空间中的指针和地址信息，将待处理数据载入所述数据空间；将所述待处理数据分配给处于不同空间维度的进程；控制不同空间维度的进程并行处理被分配的所述待处理数据，促进了计算机进程的并行计算。

技术领域

本发明涉及计算机应用领域，特别涉及一种数据处理的方法和装置。

背景技术

随着计算机应用越来越广泛，用户对于其处理数据的速度要求越来越高，那么，多进程并行化的处理数据的方式也就应运而生。

多进程并行化处理数据的方式主要是在二维化的系统中运行，如在以C语言为基础的系统可以通过多个处理器CPU同时运行多个进程来处理海量的数据，例如：计算机将文件A中的数据封装成了资源a、资源b和资源c，当这封装后的资源a、资源b和资源c间不涉及依赖关系时，计算机可同时调用进程1、进程2和进程3同时分别处理资源a、资源b和资源c，即进程1处理资源a、进程2处理资源b和进程3处理资源c，而在数据处理过程中，进程1将对资源a进行加锁保护、进程2对资源b进行加锁保护以及进程3对资源c进行加锁保护，那么，当有新的进程4想要请求或处理文件A中的资源a时，需要等待进程1对资源a解除锁保护后才可以请求或处理资源a。

也就是说，当两个进程间因为请求或处理同一个资源发生冲突，而不得不使其中一个进程暂停运行并进行等待，产生进程互斥的行为，而且随着进程数量的增加，这种进程互斥将更加的明显，一定程度上，阻碍了计算机进程的并行计算。

发明内容

本发明提供一种数据处理的方法和装置，以促进计算机进程的并行计算。

一种数据处理的方法，建立数据空间，将数据的指针和地址信息存储在所述数据空间；为所述数据空间划分三维以上的空间维度，使计算机的进程运行在所述三维以上的空间维度上，不同空间维度间的进程没有依赖性；还包括：

通过存储于所述数据空间中的指针和地址信息，将待处理数据载入所述数据空间；

将所述待处理数据分配给处于不同空间维度的进程；

控制不同空间维度的进程并行处理被分配的所述待处理数据。

优选地，所述空间维度包括五维的空间维度，其中，三个维度用于标记所述待处理数据在空间中的地址，另两个维度包括：权限维度和时间维度；

所述将所述待处理数据分配给处于不同空间维度的进程，包括：通过所述待处理数据在空间中的地址，将所述待处理数据分配给处于不同空间维度的进程；

所述控制不同空间维度的进程并行处理被分配的待处理数据，包括：所述权限维度与所述时间维度间的进程以所述待处理数据为基础，进行非重叠的互斥访问。

优选地，所述控制不同空间维度的进程并行处理被分配的待处理数据，包括：所述权限维度与所述时间维度间的进程以所述待处理数据为基础，进行高优先级进程已处理的所述待处理数据覆盖低优先级进程已处理的所述待处理数据的进程交错访问。

优选地，所述控制不同空间维度的进程并行处理被分配的待处理数据，包括：所述权限维度与所述时间维度间的进程以所述待处理数据为基础，进行时间点靠后的进程已处理的所述待处理数据覆盖时间点靠前的进程已处理的所述待处理数据的进程交错访问。

优选地，该方法进一步包括：为所述三维以上的空间维度中的每一维分别生成对应的所述待处理数据的副本；

所述将待处理数据载入所述数据空间，包括：将生成的所有副本载入所述数据空间；