[发明专利]一种信息采集系统及Web应用

说明书

技术领域

本申请涉及计算机应用技术领域，更具体地说，涉及一种信息采集系统及Web应用。

背景技术

Web(World Wide Web，全球广域网)，也称为万维网，是一种基于超文本和HTTP(HyperText Transfer Protocol，超文本传输协议)的分布式图形信息系统。Web应用是一种可以通过Web访问的应用程序。Web应用的一个最大好处是用户很容易访问应用程序。用户只需要有浏览器即可，不需要再安装其他软件，这一特性使得Web应用的使用非常广泛。

随着信息化的不断推进，如何采集用户在访问Web应用过程中产生的数据(例如被访问次数、关键词搜索频次等)成为各个Web应用公司关注的焦点。现有技术中对于Web应用在用户访问过程中产生的信息采集的方式通常为：抓取服务器生成的日志，并对抓取的日志进行分析以期得到想要的信息数据。但是随着服务器使用时间的增加，服务器生成的日志数量越来越多，对服务器日志的抓取和分析消耗的计算资源变得越来越庞大，并且由于各个服务器生成的日志格式的不一，导致日志的分析难度很大。

发明内容

为解决上述技术问题，本发明提供了一种信息采集系统及Web应用，以实现降低采集目标数据所消耗的计算资源和日志文件的分析难度的目的。

为实现上述技术目的，本发明实施例提供了如下技术方案：

一种信息采集系统，应用于Web应用，所述信息采集系统包括：数据采集模块、数据写入模块和数据分析模块；其中，

所述数据采集模块，用于采集目标数据并向所述数据写入模块传输；

所述数据写入模块，用于将所述目标数据以预设格式写入日志文件中；

所述数据分析模块，用于分析所述日志文件获得分析数据。

可选的，所述数据采集模块具体用于，以异步方式采集所述目标数据并向所述数据写入模块传输。

可选的，所述数据写入模块具体用于每隔预设时间生成一个日志文件，所述日志文件包括所述预设时间内的目标数据。

可选的，所述数据写入模块还用于以预设分类模式对生成的日志文件进行分类保存。

可选的，所述预设分类模式为按日志生成日期分类。

可选的，所述数据分析模块具体用于，在每个预设周期内分析所述日志文件获得分析数据。

可选的，所述数据分析模块还用于在每个预设周期内根据所述分析数据生成数据报表。

可选的，所述目标数据为收视率数据或点击率数据或关键词搜索频次数据。

一种Web应用，包括前端页面、后台处理模块和上述任一项所述的信息采集系统。

从上述技术方案可以看出，本发明实施例提供了一种信息采集系统及Web应用，其中，所述信息采集系统直接通过所述数据采集模块采集Web应用的目标数据，而不需要抓取服务器日志再对服务器日志进行分析，降低了目标数据采集过程消耗的计算资源；所述输入写入模块以统一的预设格式将所述目标数据写入日志文件中，从而降低了所述数据分析模块分析所述日志文件获得分析数据的难度。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请的一个实施例提供的一种信息采集系统的结构示意图；

图2为本申请的一个实施例提供的一种Web应用的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请实施例提供了一种信息采集系统，如图1所示，应用于Web应用，所述信息采集系统包括：数据采集模块100、数据写入模块200和数据分析模块300；其中，

所述数据采集模块100，用于采集目标数据并向所述数据写入模块200传输；

所述数据写入模块200，用于将所述目标数据以预设格式写入日志文件中；

所述数据分析模块300，用于分析所述日志文件获得分析数据。