[发明专利]日志数据处理方法、装置、电子设备及存储介质有效
申请号: | 201810263869.3 | 申请日: | 2018-03-28 |
公开(公告)号: | CN108491526B | 公开(公告)日: | 2022-02-22 |
发明(设计)人: | 陈其荣 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 刘映东 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 数据处理 方法 装置 电子设备 存储 介质 | ||
本发明公开了一种日志数据处理方法、装置、电子设备及存储介质,属于计算机技术领域。该方法包括:当接收到流转指令时,显示流转界面,基于流转界面的输入选项,获取目标流转路径信息,根据目标流转路径信息至少包括的源服务器的标识、流转启动时间和目标服务器的标识,从源服务器中获取日志数据;当日志数据成功流转至目标服务器时,显示入库界面,基于入库界面的输入选项,获取日志数据的目标入库路径信息;根据入库路径信息的筛选条件信息对日志数据进行筛选,并将筛选后的日志数据存储至目标服务器的数据库中。由于无需人工编写程序指令,提高了日志数据处理效率和数据分析脚本开发效率。
技术领域
本发明涉及计算机技术领域,特别涉及一种日志数据处理方法、装置、电子设备及存储介质。
背景技术
服务器为用户提供某项服务时,往往会产生大量的日志数据,以记录该服务的运行状态和用户的行为。例如,服务器为用户提供就医服务时,会生成记录用户挂号情况、处方流转情况的日志数据。一般的,日志数据分布在多个源服务器中。在实际产品运营过程中,工作人员通常需要将多个源服务器的日志数据进行流转、入库处理,以使工作人员可以在一个目标服务器中分析产品运营效果,制定运营策略。其中,流转是指将多个源服务器的日志数据转移至目标服务器中,入库是指在将流转至目标服务器的日志数据存储至数据库中。
相关技术中,日志数据处理过程为:当需要某类日志数据时,工作人员确定生成该类日志数据的多个源服务器的源地址和目标服务器的目的地址,在该类日志数据的数据分析脚本中编写流转、入库的程序指令,并将该源地址和目的地址添加至该数据分析脚本中,目标服务器执行该数据分析脚本,从而将多个源服务器中的日志数据流转至目标服务器,然后将该日志数据存储至目标服务器的数据库中。
在实现本发明的过程中,发明人发现相关技术至少存在以下问题:
实际上,对该类日志数据的计算和分析是该数据分析脚本的主要用途,然而,工作人员在开发该数据分析脚本时,还需要花费大量时间人工编写流转和入库的程序指令,导致数据分析脚本的开发效率和日志数据的处理效率均较低。
发明内容
本发明实施例提供了一种日志数据处理方法、装置、电子设备及存储介质,可以解决相关技术中数据分析脚本的开发效率和日志数据的处理效率均较低的问题。所述技术方案如下:
第一方面,提供了一种日志数据处理方法,所述方法应用在目标服务器中,所述方法包括:
当接收到流转指令时,显示流转界面,基于所述流转界面的输入选项,获取目标流转路径信息,所述目标流转路径信息至少包括源服务器的标识、流转启动时间和目标服务器的标识;
根据所述源服务器的标识、所述流转启动时间和所述目标服务器的标识,从所述源服务器中获取日志数据,以使所述日志数据流转至所述目标服务器;
当所述日志数据成功流转至所述目标服务器时,显示入库界面,基于所述入库界面的输入选项,获取所述日志数据的目标入库路径信息,所述入库路径信息至少包括筛选条件信息;
根据所述筛选条件信息对所述日志数据进行筛选,并将筛选后的日志数据存储至所述目标服务器的数据库中。
第二方面,提供了一种日志数据处理装置,所述装置应用在目标服务器中,所述装置包括:
显示模块,用于当接收到流转指令时,显示流转界面,基于所述流转界面的输入选项,获取目标流转路径信息,所述目标流转路径信息至少包括源服务器的标识、流转启动时间和目标服务器的标识;
获取模块,用于根据所述源服务器的标识、所述流转启动时间和所述目标服务器的标识,从所述源服务器中获取日志数据,以使所述日志数据流转至所述目标服务器;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810263869.3/2.html,转载请声明来源钻瓜专利网。