[发明专利]日志优化方法、装置、设备及可读存储介质有效
申请号: | 202010222199.8 | 申请日: | 2020-03-26 |
公开(公告)号: | CN111538704B | 公开(公告)日: | 2023-09-15 |
发明(设计)人: | 成卓鸿 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F16/35;G06F40/216 |
代理公司: | 北京市京大律师事务所 11321 | 代理人: | 于亭 |
地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 优化 方法 装置 设备 可读 存储 介质 | ||
1.一种日志优化方法,其特征在于,所述日志优化方法包括:
根据日志优化请求,从日志数据库中获取当前系统在运行过程中所产生的所有日志文件,形成日志文件集合,其中,所述日志文件集合包括:当前系统的历史日志文件和当前系统在当前时刻产生的实时日志文件;
依次提取所述日志文件集合中每条日志文件的属性特征,以及所述属性特征对应的属性值,并对所述属性特征进行分类处理,得到至少一个第一属性集合,其中,所述第一属性集合包括至少一个第一属性值子集,每个第一属性值子集对应一类属性特征;所述属性特征包括错误类、业务依赖类和修改类;所述属性特征包括多个属性值;所述错误类包括系统错误;所述业务依赖类包括公共服务和业务线;所述公共服务包括账号服务、评论服务和登录服务;所述业务线包括游戏业务、产品中心、交易平台和供应商信息;
根据预设的抽象摘要算法,分别对所述第一属性值子集中的属性值进行抽象处理,生成对应的第二属性子集;
将抽象处理得到的所有第二属性子集进行合并,得到第二属性集合,根据所述第二属性集合输出所述日志文件集合的关键摘要,并以所述关键摘要代替当前系统所存储的所述日志文件集合;
所述依次提取所述日志文件集合中每条日志文件的属性特征,以及所述属性特征对应的属性值,并对所述属性特征进行分类处理,得到至少一个第一属性集合包括:根据特征提取算法,对所述日志文件集合中的日志文件逐一进行属性特征的提取,得到属性特征集合;根据所述属性特征集合中的每个属性特征进行属性值的提取,形成数值集合,其中,所述数值集合为包含所述属性值与所述属性特征之间的对应关系的集合;根据所述数值集合对所述属性特征集合中的属性特征进行分类处理,并基于预设的属性树状图构建原理将分类后的属性特征生成树形结构图,得到所述第一属性集合,其中所述树形结构图包括祖先节点和子节点,每个祖先节点对应一个属性特征的类别,每个子节点对应一个属性特征;
根据所述数值集合对所述属性特征集合中的属性特征进行分类处理,得到所述第一属性集合包括:根据所述数值集合对所述属性特征集合进行去重处理,并计算去重后的每个所述属性特征在所述日志文件集合中的频数;确定所述频数的等级,并根据所述等级对所述属性特征进行分类,得到所述第一属性集合;或者,根据所述数值集合对所述属性特征集合进行去重处理,并计算去重后的每个所述属性特征在所述日志文件集合中的频数;根据预设的层次聚类算法和所述频数,对所述属性特征进行分类,得到所述第一属性集合。
2.根据权利要求1所述的日志优化方法,其特征在于,在所述根据预设的抽象摘要算法,分别对所述第一属性值子集中的属性值进行抽象处理,生成对应的第二属性子集之前,还包括:
统计所述第一属性值子集中的每个属性特征的属性值的最大频数;
根据所述最大频数,对所述第一属性值子集中的属性特征进行排序,得到属性特征序列,并选择序列中频数最低的属性特征作为目标属性特征。
3.根据权利要求2所述的日志优化方法,其特征在于,若每个所述属性特征均设置至少两个对应的属性值时,所述根据预设的抽象摘要算法,分别对所述第一属性值子集中的属性值进行抽象处理,生成对应的第二属性子集包括:
计算所述目标属性特征对应的每个属性值所包含的子节点的总数量,并判断计算的所述子节点的总数量是否为预设值;
若是,则设置所述总数量对应的属性值作为所述目标属性特征的目标属性值;
根据所述抽象摘要算法,对所述目标属性值进行抽象处理,得到所述第二属性集合。
4.根据权利要求3所述的日志优化方法,其特征在于,所述根据所述抽象摘要算法,对所述目标属性值进行抽象处理,得到所述第二属性集合包括:
计算所述目标属性值中每个子节点与其所连接的祖先节点之间的最短距离;
根据所述最短距离,计算抽象所述目标属性值的概念值的节点最小距离值,其中所述概念值为基于每个类别属性特征预先设定的属性特征的总称;
基于所述节点最小距离值,将所述目标属性值抽象为概念值,并计算所述概念值的计数,其中,所述概念值为所述祖先节点的属性值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010222199.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:确定收信地址的方法及相关设备
- 下一篇:基于国密算法的个人授权访问控制系统