[发明专利]用于处理日志的方法及其系统在审
申请号: | 201210467081.7 | 申请日: | 2012-11-19 |
公开(公告)号: | CN103823811A | 公开(公告)日: | 2014-05-28 |
发明(设计)人: | 宋欢;李鹏;何威;曹晓冬;廖迪青 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京铭硕知识产权代理有限公司 11286 | 代理人: | 罗延红 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 处理 日志 方法 及其 系统 | ||
1.一种用于处理日志的方法,包括:
收集步骤:收集由网络上的各个服务器针对用户操作而产生的异构日志,其中,基于用户操作在各个服务器上引起的动作项目来产生异构日志,使得异构日志包括指示动作项目的项目标识符字段;
格式转换步骤:将收集的异构日志转换为具有统一格式的日志,其中,所述统一格式包括项目标识符字段;
组合步骤:通过组合具有统一格式的日志来产生中间日志文件,并将中间日志文件存储在不同于所述各个服务器的中间服务器上;
统计步骤:基于指示期望统计的动作项目的项目标识符字段来配置日志规格文档,以利用日志规格文档从中间日志文件所包括的各个日志中自动统计期望统计的动作项目。
2.如权利要求1所述的方法,其中,所述网络上的各个服务器为前端服务器或后端服务器。
3.如权利要求1所述的方法,其中,所述统一格式还包括以下字段中的至少一个:用户标识符字段、日志标识符字段、日志产生时间字段、日志来源字段、用户行为描述字段。
4.如权利要求1所述的方法,其中,格式转换步骤包括:
解析步骤:基于统一格式中的各个字段来解析收集的异构日志;
字段排列步骤:排列解析出的各个字段,以得到具有统一格式的日志。
5.如权利要求1所述的方法,其中,日志规格文档按照XML来配置,从而以项目标识符为搜索条件来统计期望统计的动作项目。
6.如权利要求5所述的方法,其中,搜索条件包括以下字段中的至少一个与项目标识符的结合:日志产生时间字段、日志来源字段、用户行为描述字段。
7.如权利要求4所述的方法,其中,解析步骤包括:
提取步骤:基于统一格式中的各个字段来提取异构日志中的字段;
修正步骤:对提取的字段进行修正以与统一格式中的相应字段完全一致。
8.如权利要求4所述的方法,其中,在组合步骤中,特定时间段内产生的具有相同用户标识符字段、日志标识符字段或相同用户行为描述字段的日志被合并为一条日志。
9.一种用于处理日志的系统,包括:
收集装置:收集由网络上的各个服务器针对用户操作而产生的异构日志,其中,基于用户操作在各个服务器上引起的动作项目来产生异构日志,使得异构日志包括指示动作项目的项目标识符字段;
格式转换装置:将收集的异构日志转换为具有统一格式的日志,其中,所述统一格式包括项目标识符字段;
组合装置:通过组合具有统一格式的日志来产生中间日志文件,并将中间日志文件存储在不同于所述各个服务器的中间服务器上;
统计装置:基于指示期望统计的动作项目的项目标识符字段来配置日志规格文档,以利用日志规格文档从中间日志文件所包括的各个日志中自动统计期望统计的动作项目。
10.如权利要求9所述的系统,其中,格式转换装置包括:
解析装置:基于统一格式中的各个字段来解析收集的异构日志;
字段排列装置:排列解析出的各个字段,以得到具有统一格式的日志。
11.如权利要求10所述的系统,其中,解析装置包括:
提取装置:基于统一格式中的各个字段来提取异构日志中的字段;
修正装置:对提取的字段进行修正以与统一格式中的相应字段完全一致。
12.一种用于处理日志的方法,包括:
收集步骤:收集由网络上的各个服务器针对用户操作而产生的具有统一格式的日志,其中,基于用户操作在各个服务器上引起的动作项目来产生所述日志,使得所述日志包括指示动作项目的项目标识符字段;
组合步骤:通过组合所述日志来产生中间日志文件,并将中间日志文件存储在不同于所述各个服务器的中间服务器上;
统计步骤:基于指示期望统计的动作项目的项目标识符字段来配置日志规格文档,以利用日志规格文档从中间日志文件所包括的各个日志中自动统计期望统计的动作项目。
13.如权利要求12所述的方法,其中,所述网络上的各个服务器为前端服务器或后端服务器。
14.如权利要求12所述的方法,其中,所述统一格式还包括以下字段中的至少一个:用户标识符字段、日志标识符字段、日志产生时间字段、日志来源字段、用户行为描述字段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210467081.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:简易母排折弯机
- 下一篇:半导体装置及半导体模块