[发明专利]用户访问数据的监控系统、方法、装置及电子设备

说明书

本发明实施例提供了一种用户访问数据的监控系统、方法、装置及电子设备，实现应用服务器将采集到的用户访问记录按预设的存储格式，发送至用户记录收集服务器；用户记录收集服务器将接收到的用户访问记录存储至分析数据库中；数据监控服务器从分析数据库中获得用户访问记录；对用户访问记录进行解析，从用户访问记录中获得用户特征信息、访问对象、访问时间和访问对象间的相关性；获得各个访问对象对应的用户分布和各个访问对象对应的热度分布。在本实施例中，获得的所有用户访问记录都具有相同的存储格式，不像现有技术那样，获得的所有用户访问记录的存储格式是不一致的，因此，降低了对不同存储格式的用户访问数据进行统一分析的难度。

技术领域

本发明涉及数据处理技术领域，特别是涉及一种用户访问数据的监控系统、方法、装置及电子设备。

背景技术

为了保证能够为用户提供快速稳定的网络服务，就需要对用户的访问记录进行监控，进而获得各个访问对象的用户分布和热度分布，并根据访问对象的用户分布和热度分布信息调整该访问对象对应的网络资源，从而尽可能的避免由于用户访问量过大，导致访问对象对应的网络资源的负载过大造成的网络服务的性能下降影响用户体验的问题。

因此，需要对用户访问数据进行监控。具体的，提供网络服务的应用服务器在根据接收到的客户端发送的访问请求，进行业务处理的过程中，会根据访问请求中的访问对象将用户的访问记录存储至对应的数据源，这些数据源可以是缓存、数据库、Hbase、Hive、NoSQL等，其中，不同的数据源具有不同的数据存储格式。现有的用户访问数据的监控方法，由于各个数据源中存储的数据的格式是不相同的，仅能对不同数据源用户访问数据进行简单地统计分析。因此，存在对不同存储格式的用户访问数据进行统一分析的难度比较大的问题。

发明内容

本发明实施例的目的在于提供一种用户访问数据的监控系统、方法、装置及电子设备，以实现降低对不同存储格式的用户访问数据进行统一分析的难度。

具体技术方案如下：

为了达到上述目的，第一方面，本发明实施例提供了一种用户访问数据的监控系统，该系统包括：应用服务器、用户记录收集服务器和数据监控服务器；

所述应用服务器，用于采集用户的访问记录；将采集到的用户访问记录按预设的存储格式，发送至所述用户记录收集服务器；

所述用户记录收集服务器，用于接收所述应用服务器发送的用户访问记录；将接收到的所述用户访问记录按照所述预设的存储格式存储至用于进行数据分析的分析数据库中；

所述数据监控服务器，用于从所述分析数据库中获得用户访问记录；对所述用户访问记录进行解析，从所述用户访问记录中获得用户特征信息、访问对象、访问时间及访问对象间的相关性；对所述用户访问记录进行聚类分析，根据各个用户访问记录中的用户特征信息和访问对象，分别获得各个访问对象对应的用户分布；根据各个用户访问记录中的访问对象和访问时间，分别获得各个访问对象对应的热度分布。

可选的，所述预设的存储格式为：三元组K，T，V的形式，其中，K表示所述应用服务器在业务处理过程中，该用户访问记录将存储至的数据源的标识信息，T表示所述用户访问记录对应的时间戳，V表示用户访问记录；其中，所述用户访问记录中包含：用户特征信息、访问对象和访问时间；不同的访问对象对应的用户访问记录分别对应的存储在预设的不同数据源中。

可选的，所述应用服务器，具体用于使用设置在业务代码中的埋点代码，采集业务处理过程中，预设的采集时间窗口内生成的用户访问记录；将采集到的用户访问记录转换为三元组K，T，V的形式批量发送至所述用户记录收集服务器。