[发明专利]一种计算HiveSql执行进度的方法在审
| 申请号： | 202110439353.1 | 申请日： | 2021-04-23 |
| 公开（公告）号： | CN113138810A | 公开（公告）日： | 2021-07-20 |
| 发明（设计）人： | 童孝天 | 申请（专利权）人： | 上海中通吉网络技术有限公司 |
| 主分类号： | G06F9/448 | 分类号： | G06F9/448;G06F9/48 |
| 代理公司： | 北京细软智谷知识产权代理有限责任公司 11471 | 代理人： | 葛钟 |
| 地址： | 201799 上*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 一种 计算 hivesql 执行 进度 方法 | ||
1.一种计算HiveSql执行进度的方法，其特征在于，所述方法包括：
通过HiveSql将任务执行计划转换成MapReduce任务，获取所述MapReduce任务总数量；
获取已生成的所有MapReduce任务总量，按照预设规则将所述已生成的MapReduce进行排序，得到所述已生成MapReduce任务排序结果；
根据所述任务排序结果，得到已完成的MapReduce任务的序号；
获取当前执行的MapReduce任务进度；
计算已完成的MapReduce任务的总量在所述MapReduce任务总数量中的权重，得到已完成任务的权重结果；
将所述权重结果与所述当前执行的MapReduce任务进度相加，得到得到当前HiveSql的执行进度。
2.根据权利要求1所述的方法，其特征在于，获取已生成的所有MapReduce任务总量，按照预设规则将所述已生成的MapReduce进行排序，包括：
通过资源调度管理器查询已生成的所有MapReduce任务总量。
3.根据权利要求2所述的方法，其特征在于，所述预设规则为按照时间顺序进行排序。
4.根据权利要求2所述的方法，其特征在于，所述预设规则为按照资源调度管理器为所述MapReduce任务分配的ID进行排序，所述ID为用户时间戳加字符串。
5.根据权利要求1所述的方法，其特征在于，所述已完成的MapReduce任务的序号，为所述排序中的最后一个任务序号的前一个。
6.根据权利要求1所述的方法，其特征在于，所述获取当前执行的MapReduce的任务进度，包括：
通过资源调度管理器查询获取当前执行的MapReduce的任务进度。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海中通吉网络技术有限公司，未经上海中通吉网络技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/202110439353.1/1.html，转载请声明来源钻瓜专利网。
