[发明专利]一种用于检测日志收集稳定性的可视化展示方法及系统

说明书

本发明公开了一种用于检测日志收集稳定性的可视化展示方法，该可视化展示方法包括如下步骤：S1：获取用户终端的日志数据，并根据日志数据构建日志文件；S2：基于日志文件，构建数据表；S3：获取检测时间段；S4：根据数据表，计算获取检测时间段的检测数据；S5：可视化展示检测数据。相应的，本发明还公开了一种用于检测日志收集稳定性的可视化展示系统。本发明中的技术方案所展示的检测数据能够使用户更加直观及时的对用户终端日志数据收集记录的收集稳定性进行监控，具有较好实用性。

技术领域

本发明涉及互联网大数据收集技术领域，尤其涉及一种用于检测日志收集稳定性的可视化展示方法及系统。

背景技术

随着移动终端数量的增加，移动终端用户收集的数据量越来越大，对于数据收集量的稳定需求也随着数据的重要性而越来越高。现有技术中用户终端日志数据是存储于大数据架构Hadoop中，通过在hdfs和hive分区的方式存储。然而在对用户终端日志数据记录的收集稳定性检测时采用的是hive语句查询，然后将查询结构导入Excel报表中，以T+1的形式进行提报，即只能得到前一天以及以往历史数据的稳定性检测结果，其日志数据收集记录的稳定性检测结果必然存在滞后性，时效性差的问题，且人工进行处理的成本较高，实用性较差。

公开号为CN106936860A的中国发明专利公开了一种基于终端设备的监控系统及方法，该系统包括：终端设备装置，用于采集终端设备的日志信息；云服务器，其通过网络连接至终端设备装置，用于接收终端设备的日志信息，并存储及分析日志信息以将对应的处理策略下发至终端设备装置。该专利中是通过将所采集的终端设备的日志信息发送至云服务器，进而通过云服务器对终端设备的日志信息进行分析以检测终端设备的运行稳定性，进而可实现对终端设备进行远程监控预警管理以避免出现潜在的故障。

上述现有技术中仅涉及如何将所收集的终端设备的日志信息发送至云服务器并且对所收集的日志信息进行分析后采用对应的策略下发至终端设备以检测设备产品的运行稳定性。但是，其并未解决现有技术中对于终端设备的稳定性检测过程中由于所采集的日志数据存在滞后性，时效性差而导致终端设备日志收集记录的收集稳定性的检测数据可靠性较低的问题。

发明内容

针对上述问题，本发明公开了一种用于检测日志收集稳定性的可视化展示方法，该展示方法包括如下步骤：

S1：获取用户终端的日志数据，并根据日志数据构建日志文件；

S2：基于日志文件，构建数据表；

S3：获取检测时间段；

S4：根据数据表，计算获取检测时间段的检测数据；

S5：可视化展示检测数据。

进一步的，上述步骤S1包括：

S11：获取用户终端的日志数据；

S12：分发存储日志数据并生成日志存储信息；

S13：将日志存储信息记录于日志文件内。

进一步的，上述步骤S2包括：

S21：制定数据表结构；

S22：根据日志文件，获取记录行数据；

S23：将记录行数据插入数据表。

上述数据表的结构至少包括终端配置信息、日期、时刻、地域编码等字段信息。

进一步的，上述步骤S22包括步骤：

获取定时读取时间；

根据定时读取时间，定时读取日志文件以获取预设时间间隔内的记录行数据。

进一步的，上述步骤S4包括：