[发明专利]日志信息入库处理方法和装置在审
申请号: | 201410116995.8 | 申请日: | 2014-03-26 |
公开(公告)号: | CN103927338A | 公开(公告)日: | 2014-07-16 |
发明(设计)人: | 赵丰富 | 申请(专利权)人: | 网神信息技术(北京)股份有限公司;网神科技(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 李志刚;吴贵明 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 信息 入库 处理 方法 装置 | ||
1.一种日志信息入库处理方法,其特征在于,包括:
获取网络环境中产生的日志信息;
将所述日志信息存储到缓存文件;以及
通过所述缓存文件将所述日志信息导入数据库。
2.根据权利要求1所述的日志信息入库处理方法,其特征在于,通过所述缓存文件将所述日志信息导入数据库包括:
通过单独的进程读取所述缓存文件;以及
采用所述数据库的文件入库方式将所述单独的进程读取的缓存文件导入到所述数据库。
3.根据权利要求2所述的日志信息入库处理方法,其特征在于,
在将所述日志信息存储到缓存文件之后,所述日志信息入库处理方法还包括:生成与所述缓存文件对应的编号;将所述缓存文件对应的编号写入到所述缓存文件中,
其中,通过所述缓存文件将所述日志信息导入数据库包括:当所述单独的进程启动时,通过所述单独的进程从所述缓存文件中读取所述缓存文件对应的编号;通过所述缓存文件对应的编号判断所述编号对应的缓存文件是否已经导入所述数据库;如果判断出所述编号对应的缓存文件未导入所述数据库,则将所述编号对应的缓存文件导入到所述数据库。
4.根据权利要求1所述的日志信息入库处理方法,其特征在于,将所述日志信息存储到缓存文件包括:
对所述日志信息进行解析;
将解析后的日志信息转化为数据对象;
验证所述数据对象的属性与所述日志信息是否相符;
如果验证出所述数据对象的属性与所述日志信息相符,则将所述数据对象写入缓存文件。
5.根据权利要求4所述的日志信息入库处理方法,其特征在于,所述数据对象为所述数据库可识别的POJO对象,所述缓存文件为cache文件,其中,将所述数据对象写入缓存文件包括:
将所述POJO对象存储在日志信息队列池中;
从所述日志信息队列池中读取存储后的POJO对象;以及
按照预设时长将读取的POJO对象写入到所述cache文件。
6.一种日志信息入库处理装置,其特征在于,包括:
获取单元,用于获取网络环境中产生的日志信息;
存储单元,用于将所述日志信息存储到缓存文件;以及
导入单元,用于通过所述缓存文件将所述日志信息导入数据库。
7.根据权利要求6所述的日志信息入库处理装置,其特征在于,所述导入单元包括:
第一读取模块,用于通过单独的进程读取所述缓存文件;以及
第一导入模块,用于采用所述数据库的文件入库方式将所述单独的进程读取的缓存文件导入到所述数据库。
8.根据权利要求7所述的日志信息入库处理装置,其特征在于,
所述日志信息入库处理装置还包括:生成单元,用于在将所述日志信息存储到缓存文件之后,生成与所述缓存文件对应的编号;写入单元,用于将所述缓存文件对应的编号写入到所述缓存文件中,
其中,所述导入单元包括:第二读取模块,用于当所述单独的进程启动时,通过所述单独的进程从所述缓存文件中读取所述缓存文件对应的编号;判断模块,用于通过所述缓存文件对应的编号判断所述编号对应的缓存文件是否已经导入所述数据库;第二导入模块,用于当判断出所述编号对应的缓存文件未导入所述数据库,将所述编号对应的缓存文件导入到所述数据库。
9.根据权利要求6所述的日志信息入库处理装置,其特征在于,所述存储单元包括:
解析模块,用于对所述日志信息进行解析;
转化模块,用于将解析后的日志信息转化为数据对象;
验证模块,用于验证所述数据对象的属性与所述日志信息是否相符;
写入模块,用于当验证出所述数据对象的属性与所述日志信息相符时,将所述数据对象写入缓存文件。
10.根据权利要求9所述的日志信息入库处理装置,其特征在于,所述数据对象为所述数据库可识别的POJO对象,所述缓存文件为cache文件,其中,所述写入模块包括:
存储子模块,用于将所述POJO对象存储在日志信息队列池中;
读取子模块,用于从所述日志信息队列池中读取存储后的POJO对象;以及
写入子模块,用于按照预设时长将读取的POJO对象写入到所述cache文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网神信息技术(北京)股份有限公司;网神科技(北京)有限公司,未经网神信息技术(北京)股份有限公司;网神科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410116995.8/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置