[发明专利]日志处理方法、装置、计算机装置及计算机可读存储介质在审
| 申请号: | 201910648085.7 | 申请日: | 2019-07-18 |
| 公开(公告)号: | CN110515912A | 公开(公告)日: | 2019-11-29 |
| 发明(设计)人: | 曾琰;邓大为;张圣栋 | 申请(专利权)人: | 湖南星汉数智科技有限公司 |
| 主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/21;G06F16/22;G06F11/32 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 410000 湖南省长沙市高新开*** | 国省代码: | 湖南;43 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明适用于互联网技术领域,提供了一种日志处理方法、装置、计算机装置及计算机可读存储介质,方法包括:通过Kafka系统获取日志信息,日志信息包括多个项目的日志数据;将日志数据存储到与所属项目名称相同的话题topic中;通过由JStorm框架开发的数据处理模块,按照自定义数据格式解析从话题topic中获取的日志数据,得到解析后的日志数据;通过由JStorm框架开发的数据存储模块,按照预设解析规则所指定的数据库类型、数据库名称及目的数据表将解析后的日志数据存入ElasticSearch数据库中相应的数据表内。本发明提供的日志处理方法,能够按照自定义数据格式解析从Kafka系统获取的日志数据,并将解析后的日志数据存入ElasticSearch数据库中相应的表内,提高日志数据处理效果。 | ||
| 搜索关键词: | 日志数据 解析 自定义数据格式 框架开发 日志处理 日志信息 系统获取 数据库 计算机可读存储介质 数据处理模块 数据存储模块 互联网技术 计算机装置 数据库类型 多个项目 解析规则 所属项目 数据处理 话题 日志 预设 存储 | ||
【主权项】:
1.一种日志处理方法,其特征在于,包括:/n通过Kafka系统获取日志信息,所述日志信息包括多个项目的日志数据;将所述日志数据存储到与所属项目名称相同的话题topic中;/n通过由JStorm框架开发的数据处理模块,按照自定义数据格式解析从所述话题topic中获取的日志数据,得到解析后的日志数据;/n通过由JStorm框架开发的数据存储模块,按照预设解析规则所指定的数据库类型、数据库名称及目的数据表将所述解析后的日志数据存入ElasticSearch数据库中相应的数据表内。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖南星汉数智科技有限公司,未经湖南星汉数智科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910648085.7/,转载请声明来源钻瓜专利网。
- 上一篇:资源的处理方法及装置
- 下一篇:日志处理方法及装置





