[发明专利]一种数据存储系统

权利要求书

1.一种数据存储系统，其特征在于，所述系统包括CPU和存算一体设备，所述存算一体设备包括：多个计算模块，多个存储阵列以及监控模块；

所述监控模块用于实现对CPU、计算模块、存储阵列以及待处理任务的状态监控；

所述监控模块还用于根据计算模块和存储阵列的状态进行动态的匹配，其中，所述动态的匹配包括：将多个计算模块分为第一计算模块组和第二计算模块组，将第一计算模块组中的计算模块根据存储阵列的状态和待处理任务的状态划分至对应的存储阵列，其中，第一计算模块组中的计算模块的个数大于存储阵列的个数；

所述第二计算模块组中的计算模块为空闲计算模块，根据待处理任务和CPU的状态进行分配；

其中，当所述待处理任务为新数据时，所述监控模块获取新数据的状态，所述新数据的状态至少包括新数据的大小、新数据的权重，根据新数据的状态确定新数据的存储策略，然后将新数据发送至CPU和、或计算模块进行处理后，根据存储策略存储至对应的存储阵列；

所述根据新数据的状态确定新数据的存储策略包括：

当所述新数据的大小不小于指定阈值，且新数据的权重大于设定的安全性阈值时，将所述新数据划分为不同的数据块，分别存储至不同的存储阵列中；

当所述新数据的大小小于指定阈值，且新数据的权重大于设定的安全性阈值时，将所述新数据划分为不同的数据块，分别存储至同一存储阵列中的不同位置；

当所述新数据的大小小于指定阈值，且新数据的权重不大于设定的安全性阈值时，将所述新数据存储至至少两个存储阵列中。

2.如权利要求1所述的系统，其特征在于，所述将第一计算模块组中的计算模块根据存储阵列的状态和待处理任务的状态划分至对应的存储阵列包括：

获取每个待处理任务的存储地址，根据所述存储地址确定与该存储地址对应的存储阵列；其中，每个待处理任务中包括至少一个数据；

确定所述存储地址对应的待处理任务量的个数R，所述存储地址对应的数据的大小M，以及确定所述存储地址对应的存储阵列的剩余空间的大小N，根据所述M、N确定需要的计算模块的个数P；

其中，其中，R_total为待处理任务的总个数；M_total为所有待处理任务中数据的总大小；N_total为每个存储阵列的最大存储空间，a为常系数。

3.如权利要求1所述的系统，其特征在于，根据待处理任务和CPU的状态进行空闲计算模块分配包括：

确定CPU所需处理的待处理任务的个数X，以及CPU的温度T；

当温度T超过指定阈值T_limit时，选取Y个空闲计算模块参与任务的处理；

其中，其中，b为常系数。

4.如权利要求3所述的系统，其特征在于，在空闲计算模块分配之前还包括CPU的分配，所述CPU的分配包括：确定CPU所需处理的待处理任务的个数X；

其中，c为常系数，K为空闲计算模块的个数，L为计算模块的总个数，R_total为待处理任务的总个数。

5.如权利要求1所述的系统，其特征在于，当所述待处理任务为数据子块时，从所述数据子块中获取上一数据子块对应的存储地址，然后根据所述数据子块的权重确定所述数据子块的存储策略；

根据所述存储策略确定对应的存储阵列，并获取分配给所述存储策略对应的存储阵列的计算模块；

然后使用所述计算模块执行数据子块的存储。

6.如权利要求1所述的系统，其特征在于，在确定待处理任务之前，还包括对数据进行分流处理。

7.一种基于权利要求1-6任一项所述系统的数据存储方法，其特征在于，所述方法包括：

当所述系统接收到待处理任务后，对所述待处理任务进行分流处理；

使用CPU和计算模块分别对分流后的待处理任务进行处理；

当CPU对分流后的待处理任务处理完成后，确定对应的存储阵列，然后经过与存储阵列对应的计算模块执行存储操作；

当计算模块对分流后的待处理任务处理完成后，进行存储操作；

其中，当CPU和、或计算模块负载变大时，使用空闲计算模块进行算力补充。