[发明专利]基于Yarn框架的资源共享控制系统有效
| 申请号: | 201310482150.6 | 申请日: | 2013-10-15 |
| 公开(公告)号: | CN103593242B | 公开(公告)日: | 2017-04-05 |
| 发明(设计)人: | 胡春明;王文峰;杨任宇;康俊彬 | 申请(专利权)人: | 北京航空航天大学 |
| 主分类号: | G06F9/50 | 分类号: | G06F9/50 |
| 代理公司: | 北京同立钧成知识产权代理有限公司11205 | 代理人: | 刘芳 |
| 地址: | 100191*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 yarn 框架 资源共享 控制系统 | ||
1.一种基于Yarn框架的资源共享控制系统,其特征在于,所述控制系统包括:客户端、资源管理模块、至少一个应用管理模块和资源调度模块;
其中,所述资源管理模块用于接收所述客户端发送的第一任务请求,所述任务请求包括任务标识和任务的资源需求信息;根据所述任务标识,在至少一个应用管理模块中启动对应于所述任务标识的应用管理模块,并向所述应用管理模块发送所述第一任务请求;
所述应用管理模块用于根据所述资源需求信息向所述资源调度模块申请运行所述第一任务所需的可用资源;
所述资源调度模块用于向所述第一任务提供所述可用资源,所述可用资源与共享资源中的其他资源具有隔离性。
2.根据权利要求1所述的控制系统,其特征在于,任务标识包含任务类型;所述任务类型为虚拟机VM任务类型或并行编程技术任务类型。
3.根据权利要求2所述的控制系统,其特征在于,所述应用管理模块具体用于根据所述资源需求信息,向所述资源调度模块发送资源分配请求,所述资源分配请求包括所述任务标识和所述资源需求信息;
所述资源调度模块具体用于根据所述资源分配请求在共享资源中确定可用节点,并采用隔离策略在所述可用节点内隔离出匹配于所述资源需求信息的可用资源;向所述应用管理模块发送所述可用节点的标识和所述可用节点内的可用资源的信息;
所述应用管理模块具体用于根据所述可用节点的标识和所述可用节点内的可用资源的信息,使用所述可用资源运行所述第一任务。
4.根据权利要求3所述的控制系统,其特征在于,所述资源调度模块具体用于根据所述任务标识,采用对应的随机算法,在所述共享资源中确定第一节点,并获取所述第一节点的资源占用信息;根据所述第一节点的资源占用信息,判断所述第一节点是否可提供匹配于所述资源需求信息的可用资源;
若是,则确定所述第一节点作为可用节点;
若否,则确定新的第一节点,并返回执行所述根据所述第一节点的资源占用信息,判断所述第一节点是否可提供匹配于所述资源需求信息的可用资源。
5.根据权利要求1~4任一项所述的控制系统,其特征在于,所述控制系统还包括自适应模块;
所述自适应模块用于获取所述第一任务的当前运行信息;根据所述第一任务的当前运行信息,若判断所述第一任务运行异常,则针对所述第一任务调整所述可用资源。
6.根据权利要求5所述的控制系统,其特征在于,所述自适应模块具体用于将所述第一任务的当前运行信息与至少一个第二任务的当前运行信息比较,若判断所述第一任务处于横向异常状态,
则比较所述第一任务的当前运行信息与所述第一任务的历史运行信息;若判断所述第一任务处于纵向异常状态,则采用第一方案调整所述可用资源;
若判断所述第一任务未处于纵向异常状态且持续处于横向异常状态,则采用第二方案调整所述可用资源;
其中所述第一任务与所述第二任务为相同类型的任务。
7.根据权利要求6所述的控制系统,其特征在于,所述第一方案为将运行异常的任务由所在的当前可用节点迁移至调整可用节点,以使所述任务基于所述调整可用节点上的可用资源被运行;
所述第二方案为将当前可用节点上的当前可用资源进行扩充,以使所述任务基于扩充后的可用资源被运行。
8.根据权利要求1~4任一项所述的控制系统,其特征在于,
所述应用管理模块还用于接收客户端发送的第一任务查看请求或第一任务停止请求;
根据所述第一任务查看请求获取所述第一任务的运行状态,并向所述客户端发送所述第一任务的运行状态;
或者,根据所述第一任务停止请求停止所述第一任务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310482150.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:外接存储设备断点续传的方法及装置
- 下一篇:无屑高速切削机构





