[发明专利]一种并发获取资源的方法和装置

权利要求书

1.一种并发获取资源的方法，其特征在于，包括：

接收用户的多个资源获取任务，将所述资源获取任务注册或挂载到任务组，所述任务组中的资源获取任务存在依赖关系，每个资源获取任务用于获取对应的远程服务器上的一个资源；

通过发起写网卡数据请求，将所述每个资源获取任务通过与所述对应的远程服务器建立的网络IO通道传送到所述对应的远程服务器，以执行所述每个资源获取任务；其中，每个任务组中的资源获取任务按照由所述依赖关系确定的优先级提交到所述网络IO通道；

监听是否有远程服务器将任务执行结果返回对应的网络IO通道，若有，则通过发起读网卡数据请求，从该对应的网络IO通道读取所述任务执行结果以获得相应的资源。

2.根据权利要求1所述的方法，其特征在于，所述每个资源获取任务包括各自的任务参数，

所述将所述资源获取任务注册或挂载到任务组之前，还包括：

将所述任务参数的数量超过预设值的资源获取任务拆分为子任务，且所述子任务与其他各资源获取任务之间的依赖关系和被拆分之前的原资源获取任务与所述其他各资源获取任务之间的依赖关系相同；

所述从该对应的网络IO通道读取所述任务执行结果的步骤之后，还包括：

将所述任务执行结果中由同一资源获取任务拆分得到的子任务的任务执行结果合并。

3.根据权利要求1所述的方法，其特征在于，所述从该对应的网络IO通道读取所述任务执行结果以获得相应的资源的步骤之后，还包括：

记录每个任务执行结果对应的资源获取任务的执行时间，并统计所有任务执行结果对应的资源获取任务的平均执行时间、最大执行时间、最小执行时间。

4.根据权利要求1所述的方法，其特征在于，接收用户的多个资源获取任务的步骤，包括：

接收用户对多个资源的请求；

获取预先创建的分别与所述请求的多个资源对应的任务模板；

根据所述请求编辑各所述任务模板，得到用户的多个资源获取任务。

5.根据权利要求1所述的方法，其特征在于，

每个任务组定义有各自的最大运行时限；

所述从该对应的网络IO通道读取所述任务执行结果以获得相应的资源的步骤之前，包括：

当达到一资源获取任务所在任务组的最大运行时限之后，仍未监听到所述一资源获取任务对应的远程服务器返回任务执行结果时，取消所述一资源获取任务。

6.一种并发获取资源的装置，其特征在于，包括：

接收模块，用于接收用户的多个资源获取任务，每个资源获取任务用于获取对应的远程服务器上的一个资源；

分组模块，用于将所述资源获取任务注册或挂载到任务组，所述任务组中的资源获取任务存在依赖关系；

传送模块，用于通过发起写网卡数据请求，将所述每个资源获取任务通过与所述对应的远程服务器建立的网络IO通道传送到所述对应的远程服务器，以执行所述每个资源获取任务；其中，每个任务组中的资源获取任务按照由所述依赖关系确定的优先级提交到所述网络IO通道；

监听模块，用于监听是否有远程服务器将任务执行结果返回对应的网络IO通道，若有，则通过发起读网卡数据请求，从该对应的网络IO通道读取所述任务执行结果以获得相应的资源。

7.根据权利要求6所述的装置，其特征在于，所述每个资源获取任务包括各自的任务参数，

所述装置还包括：

拆分模块，用于将所述任务参数的数量超过预设值的资源获取任务拆分为子任务，且所述子任务与其他各资源获取任务之间的依赖关系和被拆分之前的原资源获取任务与所述其他各资源获取任务之间的依赖关系相同；

所述装置还包括：

合并模块，用于将所述任务执行结果中由同一资源获取任务拆分得到的子任务的任务执行结果合并。

8.根据权利要求6所述的装置，其特征在于，还包括：

统计模块，用于记录每个任务执行结果对应的资源获取任务的执行时间，并统计所有任务执行结果对应的资源获取任务的平均执行时间、最大执行时间、最小执行时间。