[发明专利]一种利用图分析的Hadoop系统异常原因诊断方法及装置有效
申请号: | 201910318337.X | 申请日: | 2019-04-19 |
公开(公告)号: | CN110175085B | 公开(公告)日: | 2020-11-27 |
发明(设计)人: | 杨恺;谢雨霞 | 申请(专利权)人: | 同济大学 |
主分类号: | G06F11/07 | 分类号: | G06F11/07;G06F16/22;G06F16/28 |
代理公司: | 上海科盛知识产权代理有限公司 31225 | 代理人: | 蔡彭君 |
地址: | 200092 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 利用 分析 hadoop 系统 异常 原因 诊断 方法 装置 | ||
1.一种利用图分析的Hadoop系统异常原因诊断方法,其特征在于,包括:
步骤S1:导入异常日志文件,并获取文件中的异常日志信息;
步骤S2:基于异常日志信息,获取调用栈里面的函数调用关系,并结合先验知识绘制错误堆栈的调用关系图模型,其中所述调用关系图模型包括多个用于表示根本原因的第一类节点和多个用于表示调用栈中涉及函数的第二类节点,以及用于表示函数之间调用关系的第一类边和用于表示函数和根本原因关联关系的第二类边;
步骤S3:获得待诊断的异常记录,提取其涉及的函数,并基于调用关系图模型输出导致异常的根本原因。
2.根据权利要求1所述的一种利用图分析的Hadoop系统异常原因诊断方法,其特征在于,所述第一类边和第二类边均为有向线段,且所述第一类边的箭头指向被调用的函数。
3.根据权利要求1所述的一种利用图分析的Hadoop系统异常原因诊断方法,其特征在于,所述步骤S3具体包括:
步骤S31:获得待诊断的异常记录,并提取其涉及的函数;
步骤S32:判断提取的函数在调用关系图模型中是否存在指向任一根本原因的路径,若为是,则执行步骤S34,反之,则执行步骤S33;
步骤S33:基于图分析的原理,找出提取的函数在调用关系图模型当中的最长公共子序列,该子序列指向的根本原因作为异常诊断的候选原因同时对外反馈异常信息并基于返回诊断结果增量更新调用关系图模型;
步骤S34:输出指向的根本原因作为诊断结果。
4.根据权利要求1所述的一种利用图分析的Hadoop系统异常原因诊断方法,其特征在于,所述步骤S3具体包括:
步骤S31:获得待诊断的异常记录,并提取其涉及的函数;
步骤S32:判断提取的函数在调用关系图模型中是否存在指向任一根本原因的路径,若为是,则执行步骤S34,反之,则执行步骤S33;
步骤S33:对外发送异常信息,并接收人工反馈结果增量更新调用关系图模型;
步骤S34:输出指向的根本原因作为诊断结果。
5.一种利用图分析的Hadoop系统异常原因诊断装置,其特征在于,包括存储器、处理器,以及存储于所述存储器中并由所述处理器执行的程序,所述处理器执行所述程序时实现以下步骤:
步骤S1:导入异常日志文件,并获取文件中的异常日志信息;
步骤S2:基于异常日志信息,获取调用栈里面的函数调用关系,并结合先验知识绘制错误堆栈的调用关系图模型,其中所述调用关系图模型包括多个用于表示根本原因的第一类节点和多个用于表示调用栈中涉及函数的第二类节点,以及用于表示函数之间调用关系的第一类边和用于表示函数和根本原因关联关系的第二类边;
步骤S3:获得待诊断的异常记录,提取其涉及的函数,并基于调用关系图模型输出导致异常的根本原因。
6.根据权利要求5所述的一种利用图分析的Hadoop系统异常原因诊断装置,其特征在于,所述第一类边和第二类边均为有向线段,且所述第一类边的箭头指向被调用的函数。
7.根据权利要求5所述的一种利用图分析的Hadoop系统异常原因诊断装置,其特征在于,所述步骤S3具体包括:
步骤S31:获得待诊断的异常记录,并提取其涉及的函数;
步骤S32:判断提取的函数在调用关系图模型中是否存在指向任一根本原因的路径,若为是,则执行步骤S34,反之,则执行步骤S33;
步骤S33:基于图分析的原理,找出提取的函数在调用关系图模型当中的最长公共子序列,该子序列指向的根本原因作为异常诊断的候选原因同时反馈异常信息并基于人工诊断结果增量更新调用关系图模型;
步骤S34:输出指向的根本原因作为诊断结果。
8.根据权利要求5所述的一种利用图分析的Hadoop系统异常原因诊断装置,其特征在于,所述步骤S3具体包括:
步骤S31:获得待诊断的异常记录,并提取其涉及的函数;
步骤S32:判断提取的函数在调用关系图模型中是否存在指向任一根本原因的路径,若为是,则执行步骤S34,反之,则执行步骤S33;
步骤S33:对外发送异常信息,并接收人工反馈结果增量更新调用关系图模型;
步骤S34:输出指向的根本原因作为诊断结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910318337.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:数据变化的监控方法及装置
- 下一篇:一种Office文件数据分片修复方法