[发明专利]探索式图融合可视化方法和装置

说明书

本发明公开了一种探索式图融合可视化方法和装置，其中，方法包括以下步骤：发送HTTP请求，以从日志推送平台采集数据，得到多维日志数据；对多维日志数据进行预处理，并存储至数据库；获取当前用户的查询条件，以从数据库中查询预处理后的日志数据，并根据筛选条件对预处理后的日志数据进行筛选，以对日志数据进行初步展示，及实现日志探索式可视化融合。该方法极大提高了日志分析精准度、全面度，并可以对企业决策提供一定帮助。

技术领域

本发明涉及日志数据分析技术领域，特别涉及一种探索式图融合可视化方法和装置。

背景技术

随着互联网应用技术的飞速发展，各种服务器和网络设备产生的数据量正呈现出爆炸式的增长。日志数据的复杂化、规模化及日志格式的文本化，无序化使得分析者很难从中洞察到有用信息，更不能从多源中的日志数据中针对某一指标作对比分析，因此，如何同时多源中的海量日志数据进行对比分析、处理及可视化的技术正在成为当前研究的技术热点,能够将探索式图融合技术应用到时序日志数据中显得尤为重要。

企事业单位通常在网络的出入口处安装多种网络安全设备来记录各种网络事件以保障内部网络的安全。设备日志数据的多源异构性，时空关联性，海量性使得数据分析者或者是运维人员很难全面感知某一指标的态势，从而无法做出精准的网络决策，预测分析及风险控制。此外，通过对业界商业智能可视化平台的对标分析，普遍具有部署操作门槛高，数据源接入复杂不稳定，数据多维筛选能力弱，导致对多源数据展示不灵活甚至不提供多源数据展示功能。

相关技术，比如，一种面向异构存储多源数据管理及可视化系统的数据查询方法，提供一种面向异构存储的多源数据管理及可视化系统，该系统包括存储层，用于存储结构化数据和非结构化数据；服务层用于对存储数据进行抽取、加工、融合和抽象；应用层通过可视化的方式实现异构数据源的可视化连表查询，查询结果通过可视化技术对业务数据进行再组织形成特定场景使用的专有数据。再比如，一种用于检测日志收集稳定性的可视化展示方法及系统，该系统包括获取用户终端的日志数据，并根据日志数据构建日志文件；基于日志文件构建数据表；获取检测时间段；根据数据表,计算获取检测时间段的检测数据；可视化展示检测数据，且还公开了一种用于检测日志收集稳定性的可视化展示系统。

然而，在已有的日志数据可视化系统中，大多都是通过配置的方式获取用户终端的日志数据，形成日志数据表格，而且配置方式参差不齐，大部分只支持单个设备的日志接入，即使是支持多个设备的日志接入，步骤也较繁琐，可视化部分也都只是表格式的简单展示，不利于对日志中某一指标态势的快速查看与分析。而且多源日志融合只支持到文件层面，没有细化到多源日志中某一具体指标的原子级融合，因此并不能根据日志得到精准结果，不利于分析者做出决策。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的一个目的在于提出一种探索式图融合可视化方法，该方法极大提高了日志分析精准度、全面度，并可以对企业决策提供一定帮助。

本发明的另一个目的在于提出一种探索式图融合可视化装置。

为达到上述目的，本发明一方面实施例提出了一种探索式图融合可视化方法，发送HTTP请求，以从日志推送平台采集数据，得到多维日志数据；对所述多维日志数据进行预处理，并存储至数据库；获取当前用户的查询条件，以从所述数据库中查询预处理后的日志数据，并根据筛选条件对所述预处理后的日志数据进行筛选，以对所述日志数据进行初步展示，及实现日志探索式可视化融合。

本发明实施例的探索式图融合可视化方法，不仅可以对比分析同源的不同日志指标或同一日志指标的不同聚合维度，支持多指标项融合；也能够同时展示不同源的同一个或多个日志指标态势，支持多源融合；并且提供三大类统计图表：基础统计图表、融合统计图表、单值统计图表来满足日志数据的展示特性，并在展示过程中提供良好的交互性，从而极大提高了日志分析精准度、全面度，并可以对企业决策提供一定帮助。