[发明专利]一种单机贪婪异步并行计算优化方法及系统

权利要求书

1.一种单机贪婪异步并行计算优化系统，包括监控计算机cpu、gpu、DRM、IO相关设备参数的监控器；异步传输系统；基于贪婪算法的优化器；基于GPU的并行算法优化器，其特征在于：所述设备监参数控器实时监控计算机以获取计算机设备参数包括：初次运行收集CPU、GPU频率、IO速度、DRAM空间和传输速度；试验运行中收集CPU、GPU利用率曲线、IO利用率曲线、DRAM空间利用率曲线。

2.根据权利要求1所述的一种单机贪婪异步并行计算优化系统，其特征在于：所述异步传输系统包括依据最优参数化方案把计算数据从磁盘异步传输到DRAM，以利用DRAM的传输速度高的特征减少下次计算的数据传输等待时间。

3.根据权利要求1所述的一种单机贪婪异步并行计算优化方法及系统，其特征在于：所述基于贪婪算法的优化器包括：依据监控器实时获取到设备利用率等参数对计算任务所开启的线程数、数据批次、单批数据装填量进行不断优化，并记录最优参数化方案。

4.根据权利要求1所述的一种单机贪婪异步并行计算优化系统，其特征在于：所述基于GPU的并行算法优化器包括：

S1：低耦合，语言无关；

S2：技术底层，高复用，对于使用者来说和普通磁盘一样；

S3：底层高效，生成快、读取快；

S4：基于编程文件系统的业务可流程化。

5.根据权利要求1所述的一种单机贪婪异步并行计算优化方法，其特征在于：包括所述贪婪并行算方法以MPFS为基础结合资源贪婪最优算法，使数据传输、处理、计算全流程以异步的方式达到一种最优利用资源的综合优化框架；主要由内存级可编程文件系统MPFS、资源最优分配贪婪优化器Greedy Optimizer,GO、基于GPOF单元的综合业务流程优化构成；

还包括以下步骤：

S01：获取计算任务；

S02：通过监控器获取CPU、GPU、DRAM、IO利用率；

S03：数据异步传输：

S04：GPU算法优化器；

S05：试验性计算；

S06：通过贪婪优化器不断优化；

S07：记录最优参数化方案；

S08：按照最优参数化方案计算。

6.根据权利要求1所述的一种单机贪婪异步并行计算优化方法，其特征在于：基于内存实现操作系统级别的文件系统MFS，并利用FUSE实现MFS的可扩展事件接口。

7.根据权利要求1所述的一种单机贪婪异步并行计算优化方法，其特征在于：所述资源最优分配贪婪优化器主要由监控器和计算器组成。