[发明专利]一种日志数据处理方法及相关装置在审
| 申请号: | 201911134581.7 | 申请日: | 2019-11-19 |
| 公开(公告)号: | CN111026728A | 公开(公告)日: | 2020-04-17 |
| 发明(设计)人: | 李新峰;高隆林;韩锋;赵欣;翟鲁超 | 申请(专利权)人: | 山东中创软件商用中间件股份有限公司 |
| 主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/16;G06F16/11 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 丁曼曼 |
| 地址: | 250014 山东省*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 日志 数据处理 方法 相关 装置 | ||
本申请公开了一种日志数据处理方法,包括:当接收到日志数据时,将所述日志数据写入待写入日志文件中;当所述待写入日志文件的大小大于预设大小时,对所述待写入日志文件执行日志滚动操作,得到存档日志文件和新的待写入日志文件;根据预设日志滚动策略中的最长存储时间和最大日志个数对所有存档日志文件进行删除处理。通过先对日志数据的写入过程进行大小控制,然后通过最长存储时间和最大日志个数对存档日志文件进行删除处理,实现通过大小和时间对日志文件进行双重控制,提高了日志文件滚动的效果。本申请还公开了一种日志数据处理装置、服务器以及计算机可读存储介质,具有以上有益效果。
技术领域
本申请涉及计算机技术领域,特别涉及一种日志数据处理方法、日志数据处理装置、服务器以及计算机可读存储介质。
背景技术
应用服务器程序长期运行一段时间后,服务器上的应用系统会产生大量的历史日志文件,这些日志可以用来查找历史操作信息,当发现应用系统出现异常时,这些日志信息也将是诊断异常的重要依据。显然,无论对于应用服务器程序还是应用程序,日志的重要性都是不言而喻的,存储大量的历史日志记录对于系统的运维是必不可少的,然而对于不同的应用系统,对历史日志的要求也不尽相同。存储多长时间内的日志信息,存储多大的日志,每个日志文件的大小是多少等。
目前,现有技术中应用服务器日志滚动策略主要是以下两种方式。一种是基于日志文件的大小来滚动日志,并设置最大历史日志文件的个数,当日志文件数达到设置的最大值时,删除最早的一个历史日志文件。另一种是基于时间间隔来滚动日志,并设置历史日志文件最长存储时间,当日志文件存储时间长于设置的时间时,该文件会被删除。
但是,随着服务器使用日志文件数量日渐增多,第一种技术中,每个日志文件中的起始时间不确定,不方便信息查找,并且,当应用系统发生异常时短时间内会产生大量日志,这时会持续进行日志滚动操作,将有大量其他历史日志被删除。另一种日志处理方式中,如果按照一定数目保留历史日志文件,超过该数目的文件直接删除,导致后续不能再对历史文件进行统计分析。
因此,如何提高日志滚动策略对日志进行保存的效果是本领域技术人员关注的重点问题。
发明内容
本申请的目的是提供一种日志数据处理方法、日志数据处理装置、服务器以及计算机可读存储介质,通过先对日志数据的写入过程进行大小控制,然后通过最长存储时间和最大日志个数对存档日志文件进行删除处理,实现通过大小和时间对日志文件进行双重控制,提高了日志文件滚动的效果。
为解决上述技术问题,本申请提供一种日志数据处理方法,包括:
当接收到日志数据时,将所述日志数据写入待写入日志文件中;
当所述待写入日志文件的大小大于预设大小时,对所述待写入日志文件执行日志滚动操作,得到存档日志文件和新的待写入日志文件;
根据预设日志滚动策略中的最长存储时间和最大日志个数对所有存档日志文件进行删除处理。
可选的,还包括:
当每隔预设时间间隔,对所述待写入日志文件执行日志滚动操作,得到存档日志文件和新的待写入日志文件。
可选的,对所述待写入日志文件执行日志滚动操作,得到存档日志文件和新的待写入日志文件,包括:
对所述待写入日志文件打上时间戳,并保存为存档日志文件;
创建新的待写入日志文件。
可选的,根据预设日志滚动策略中的最长存储时间和最大日志个数对所有存档日志文件进行删除处理,包括:
根据时间戳判断是否存在存档日志文件的存储时间大于最长存储时间;
当存在存储时间大于最长存储时间的存档日志文件时,将所述存档日志文件删除;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东中创软件商用中间件股份有限公司,未经山东中创软件商用中间件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911134581.7/2.html,转载请声明来源钻瓜专利网。





