[发明专利]一种基于WEB的Spark应用程序调度方法及系统有效
申请号: | 201510805815.1 | 申请日: | 2015-11-20 |
公开(公告)号: | CN105468445B | 公开(公告)日: | 2020-01-14 |
发明(设计)人: | 高保强 | 申请(专利权)人: | TCL集团股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F11/32 |
代理公司: | 44268 深圳市君胜知识产权代理事务所(普通合伙) | 代理人: | 王永文;刘文求 |
地址: | 516006 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种基于WEB的Spark应用程序调度方法及系统,方法包括步骤:A、通过WEB从Spark应用程序库中选择可用的Spark应用程序并添加到统计活动中,并编辑各Spark应用程序的依赖关系,生成依赖关系图和执行顺序信息,并保存到调度信息数据库中;B、启动统计活动,按照执行顺序信息依次执行各Spark应用程序,并记录各Spark应用程序的状态。本发明通过浏览器来配置Spark应用程序之间的依赖关系,并能以图形化的方式展示。运维人员可以监控到Spark应用程序的各种状态,大大提高了运维的效率,降低了运维出错的概率。 | ||
搜索关键词: | 一种 基于 web spark 应用程序 调度 方法 系统 | ||
【主权项】:
1.一种基于WEB的Spark应用程序调度方法,其特征在于,包括步骤:/nA、通过WEB从Spark应用程序库中选择可用的Spark应用程序并添加到统计活动中,并编辑各Spark应用程序的依赖关系,根据各Spark应用程序的依赖关系生成依赖关系图,并生成执行顺序信息,并将执行顺序信息保存到调度信息数据库中;/nB、启动统计活动,按照执行顺序信息依次执行各Spark应用程序,并记录各Spark应用程序的状态;/n所述步骤A还包括:若Spark应用程序库中没有可用的Spark应用程序,则进入到Spark应用程序管理功能页面,向Spark应用程序库中添加Spark应用程序。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于TCL集团股份有限公司,未经TCL集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510805815.1/,转载请声明来源钻瓜专利网。