[发明专利]一种分布式计算框架参数优化方法、装置及系统有效
| 申请号： | 201310495879.7 | 申请日： | 2013-10-21 |
| 公开（公告）号： | CN103605662B | 公开（公告）日： | 2017-02-22 |
| 发明（设计）人： | 方育柯 | 申请（专利权）人： | 华为技术有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 深圳中一专利商标事务所44237 | 代理人： | 张全文 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明适用于IT技术领域，提供了一种分布式计算框架参数优化方法、装置及系统。方法包括获取当前提交的并行计算框架作业；在分布式计算框架历史运行数据库中，检索与分布式计算框架作业同类的历史分布式计算框架作业，分布式计算框架历史运行数据库包括历史分布式计算框架作业的执行信息及配置参数；在同类的分布式计算框架作业中，检索与分布式计算框架作业相似的历史分布式计算框架作业；根据相似的历史分布式计算框架作业的配置参数，对分布式计算框架作业的配置参数进行优化配置。本发明能够实现Mapreduce作业参数配置合理化、自动化以及自学习。 | ||
| 搜索关键词： | 一种 分布式 计算 框架 参数 优化 方法 装置 系统 | ||
【主权项】：
一种分布式计算框架参数优化的方法，其特征在于，包括：获取当前提交的分布式计算框架作业；在分布式计算框架历史作业运行数据库中，检索与所述分布式计算框架作业同类的历史分布式计算框架作业，所述分布式计算框架历史作业运行数据库包括历史分布式计算框架作业的执行信息及配置参数；在同类的分布式计算框架作业中，检索与所述分布式计算框架作业相似的历史分布式计算框架作业；根据相似的历史分布式计算框架作业的配置参数，对所述分布式计算框架作业的配置参数进行优化配置。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司，未经华为技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201310495879.7/，转载请声明来源钻瓜专利网。
- 上一篇：科研信息演化的分析方法和装置
- 下一篇：新型多功能室内外空气交换净化器
