[发明专利]基于Spark的任务处理方法及装置在审
| 申请号: | 201711274615.3 | 申请日: | 2017-12-06 |
| 公开(公告)号: | CN108021460A | 公开(公告)日: | 2018-05-11 |
| 发明(设计)人: | 段灵修 | 申请(专利权)人: | 锐捷网络股份有限公司 |
| 主分类号: | G06F9/54 | 分类号: | G06F9/54 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 350002 福建省福州市仓*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 spark 任务 处理 方法 装置 | ||
1.一种基于Spark的任务处理方法,应用在客户端设备中,其特征在于,包括:
向服务端设备发送携带任务文件的请求消息,以使所述服务端设备调用选定Spark实例执行所述任务文件,并返回携带执行所述任务文件的执行结果的响应消息,其中,所述客户端设备与所述服务端设备之间通信连接;
接收携带所述执行结果的响应消息;
从所述响应消息中获取所述执行结果。
2.如权利要求1所述的方法,其特征在于,还包括:
向所述服务端设备发送通信连接请求,以使所述服务端设备与所述客户端设备建立通信连接后,返回通信连接响应;
接收所述服务端设备返回的通信连接响应。
3.一种基于Spark的任务处理方法,应用在服务端设备中,其特征在于,包括:
接收客户端设备发送的携带任务文件的请求消息后,从所述请求消息中获取所述任务文件,其中,所述客户端设备与所述服务端设备之间通信连接;
调用选定Spark实例执行所述任务文件;
向所述客户端设备发送携带执行所述任务文件的执行结果的响应消息,以使所述客户端设备从所述响应消息中获取所述执行结果。
4.如权利要求3所述的方法,其特征在于,还包括:
初始化后开启所述选定Spark实例;
监听是否接收到请求消息。
5.如权利要求3或4所述的方法,其特征在于,还包括:
接收所述客户端设备发送的通信连接请求;
与所述客户端设备建立通信连接后,向所述客户端设备返回通信连接响应。
6.一种基于Spark的任务处理装置,应用在客户端设备中,其特征在于,包括:
发送模块,用于向服务端设备发送携带任务文件的请求消息,以使所述服务端设备调用选定Spark实例执行所述任务文件,并返回携带执行所述任务文件的执行结果的响应消息,其中,所述客户端设备与所述服务端设备之间通信连接;
接收模块,用于接收携带所述执行结果的响应消息;
获取模块,用于从所述响应消息中获取所述执行结果。
7.如权利要求6所述的装置,其特征在于,所述发送模块,还用于向所述服务端设备发送通信连接请求,以使所述服务端设备与所述客户端设备建立通信连接后,返回通信连接响应;
所述接收模块,还用于接收所述服务端设备返回的通信连接响应。
8.一种基于Spark的任务处理装置,应用在服务端设备中,其特征在于,包括:
接收模块,用于接收客户端设备发送的携带任务文件的请求消息后,从所述请求消息中获取所述任务文件,其中,所述客户端设备与所述服务端设备之间通信连接;
调用模块,用于调用选定Spark实例执行所述任务文件;
发送模块,用于向所述客户端设备发送携带执行所述任务文件的执行结果的响应消息,以使所述客户端设备从所述响应消息中获取所述执行结果。
9.如权利要求8所述的装置,其特征在于,还包括:
开启模块,用于初始化后开启所述选定Spark实例;
监听模块,用于监听是否接收到请求消息。
10.如权利要求8或9所述的装置,其特征在于,所述接收模块,还用于接收所述客户端设备发送的通信连接请求;
所述发送模块,还用于与所述客户端设备建立通信连接后,向所述客户端设备返回通信连接响应。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于锐捷网络股份有限公司,未经锐捷网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711274615.3/1.html,转载请声明来源钻瓜专利网。





