[发明专利]日志数据的处理方法、电子设备及存储介质

说明书

本公开涉及一种日志数据的处理方法、电子设备及存储介质，应用于包括搜集模块、分储模块和日志处理模块的电子设备，方法包括：在主线程中通过所述搜集模块搜集日志数据；通过所述搜集模块将搜集到的日志数据发送到子线程中；在所述子线程中通过所述分储模块对所述日志数据进行分类存储；并，在所述子线程中通过所述日志处理模块获取存储的日志数据，并对获取到的日志数据进行任务处理如此，将日志数据的分类存储和任务处理在子线程中处理，减少对主线程的资源的占用，避免频繁占用主线程而对渲染线程造成的影响。

技术领域

本公开涉及数据处理技术领域，尤其涉及一种日志数据的处理方法、电子设备及存储介质。

背景技术

日志数据，就是记录系统产生的过程性事件记录数据。日志数据可以包括硬件设备状态日志和应用系统日志，记录的日志数据可以用于解决故障定位排查问题，也可以用于控制或者降低企业应用风险，因此，收集分析前端日志是前端工作中一个重要的功能。

相关技术中，日志数据的统计和分析都是在主线程中运行，对于业务流程类的日志数据，其特征是实时产生日志数据，导致日志数据量大，若通过主线程频繁处理日志数据，则会造成对主线程资源的频繁占用，影响主线程的其他功能。

发明内容

为克服相关技术中存在的问题，本公开提供一种日志数据的处理方法、电子设备及存储介质

根据本公开实施例的第一方面，提供一种日志数据的处理方法，所述方法应用于电子设备，所述电子设备包括搜集模块、分储模块以及日志处理模块，所述方法包括：

在主线程中通过所述搜集模块搜集日志数据；

通过所述搜集模块将搜集到的日志数据发送到子线程中；

在所述子线程中通过所述分储模块对所述日志数据进行分类存储；并，

在所述子线程中通过所述日志处理模块获取存储的日志数据，并对获取到的日志数据进行任务处理。

可选地，所述通过所述搜集模块将搜集到的日志数据发送到子线程中，包括：

在所述主线程中通过所述搜集模块确定当前运行环境；

在确定所述当前运行环境为生产环境的情况下，通过所述搜集模块将搜集到的日志数据发送到子线程中。

可选地，所述在所述子线程中通过所述分储模块对所述日志数据进行分类存储，包括：

在所述子线程中通过分储模块根据至少一个维度对所述日志数据进行分类，并根据分类结果对所述日志数据进行存储，所述维度包括上传频率、业务类型、功能类型、数据量和任务处理方式。

可选地，所述日志数据包括数据上传频率字段，所述在所述子线程中通过分储模块根据至少一个维度对所述日志数据进行分类，并根据分类结果对所述日志数据进行存储，包括：

在所述子线程中通过分储模块根据所述日志数据的数据上传频率字段对所述日志数据进行分类；

根据分类结果对所述日志数据进行存储，以便将所述日志数据存储到与所述数据上传频率字段相匹配的存储位置，其中，所述存储位置根据上传频率的高低进行划分。

可选地，所述日志数据还包括预设字段，所述预设字段包括业务类型字段、功能类型字段、数据量字段或处理方式字段，所述存储位置包括多个子存储位置，所述在所述子线程中通过分储模块根据所述日志数据的数据上传频率字段对所述日志数据进行分类，包括：

在所述子线程中通过分储模块根据所述日志数据的数据上传频率字段和所述预设字段对所述日志数据进行分类；

所述根据分类结果对所述日志数据进行存储，以便将所述日志数据存储到与所述数据上传频率字段相匹配的存储位置，包括：