[发明专利]一种数据的动态加载处理方法及系统

权利要求书

1.一种数据的动态加载处理方法，其特征是，所述的方法具体包括：

获取当前系统的待加载的原子任务；

根据所述的原子任务生成组合任务；

动态采集当前系统的即时中央处理器CPU使用率、即时输入/输出IO使用率；

根据所述的即时CPU使用率、即时IO使用率加载所述的组合任务，该步骤包括：获取当前系统的CPU使用上限以及IO使用上限；根据所述的即时CPU使用率、当前系统的CPU使用上限判断所述的即时CPU使用率是否饱和；当判断为否时，根据所述的即时IO使用率、当前系统的IO使用上限继续判断所述的即时IO使用率是否饱和；当判断为否时，确定所述组合任务的加载所需资源；

其中，确定所述组合任务的加载所需资源包括：获取所述原子任务的原子生成记录、运行时间以及数据规模；根据所述的运行时间以及数据规模确定原子数据加载效率；根据所述的原子数据加载效率以及原子生成记录确定所述组合任务的加载完成时间；获取所述原子任务的到达时间区间；当所述组合任务的加载完成时间在所述的到达时间区间内时，获取所述原子任务的资源消耗；根据所述的资源消耗以及原子生成记录确定所述组合任务的加载所需资源。

2.根据权利要求1所述的方法，其特征是，根据所述的原子任务生成组合任务具体包括：

确定所述原子任务的目标表；

确定所述原子任务的源表；

根据所述原子任务的源表以及目标表对所述的原子任务进行组合，生成组合任务。

3.根据权利要求2所述的方法，其特征是，根据所述的即时CPU使用率、即时IO使用率加载所述的组合任务还包括：

根据所述的加载所需资源、所述的CPU使用上限以及IO使用上限加载所述的组合任务。

4.根据权利要求3所述的方法，其特征是，根据所述的加载所需资源、所述的CPU使用上限以及IO使用上限加载所述的组合任务具体包括：

根据所述加载所需资源确定所述组合任务加载所需的CPU使用率以及IO使用率；

判断所述组合任务加载所需的CPU使用率是否超出当前系统的CPU使用上限；

当判断为否时，继续判断所述组合任务加载所需的IO使用率是否超出当前系统的IO使用上限；

当判断为否时，加载所述的组合任务。

5.根据权利要求2所述的方法，其特征是，根据所述的即时CPU使用率、即时IO使用率加载所述的组合任务还包括：

当所述的即时IO使用率饱和时，获取所述原子任务的运行时间、资源消耗；

根据所述的运行时间、资源消耗确定所述原子任务的属性偏向；

根据所述原子任务的属性偏向确定所述组合任务的属性偏向；

判断所述组合任务的属性偏向是否为CPU型；

当判断为是时，加载所述的组合任务。

6.根据权利要求2所述的方法，其特征是，根据所述的即时CPU使用率、即时IO使用率加载所述的组合任务还包括：

当所述的即时CPU使用率饱和时，根据所述的即时IO使用率、当前系统的IO使用上限继续判断所述的即时IO使用率是否饱和；

当判断为否时，获取所述原子任务的运行时间、资源消耗；

根据所述的运行时间、资源消耗确定所述原子任务的属性偏向；

根据所述原子任务的属性偏向确定所述组合任务的属性偏向；

判断所述组合任务的属性偏向是否为IO型；

当判断为是时，加载所述的组合任务。