[发明专利]一种基于大页内存的存储监控系统及方法

说明书

本申请涉及计算机技术领域，提供了一种基于大页内存的存储监控系统及方法，所述系统包括：周期管理器，用于生成原始数据的预设信息类型并发送给数据收集器，周期性地发送dump指令给数据生成器，且发送扫描指令给中间扫描器；数据收集器：附着在I/O上，用于收集原始收集数据；数据生成器，设置在每个polling core，用于接受原始收集数据，生成周期大页，且发送给中间扫描器；中间扫描器：扫描周期大页，生成监控数据；归档存储器，用于按照时间点生成时序数据链，提供数据存储接口和查询接口。本申请采用周期性的大页缓存作为监控数据，形成时序数据链，用以查询。因此，本公开实施例提高了监控运行的效率，从而保证了被监控系统运行流畅。

技术领域

本申请属于计算机技术领域，涉及一种基于大页内存的存储监控系统及方法。

背景技术

存储系统中，对I/O的控制是核心功能，每时每刻存储系统都将处理大量的数据操作，发生在I/O路径上的所有过程，都将被视为核心过程，那么对I/O路径的实时监控，将是在存储系统开发、调试与安全运维过程中，成功掌控存储系统的关键工具。系统开发时，实时监控信息可为系统排错、性能优化提供有力的帮助;系统发布后，实时监控还将记录系统每天产生的大量信息，为系统的安全监测和运行维护提供数据。

当前流行的分布式存储系统，在传统存储基础上，增加了跨网络、跨节点、跨硬件的基本属性、不定时scale out的功能等，对分布式存储的实时监控提出了更加严苛的要求。最新一代的分布式存储为更有效的利用计算资源，会将线程绑定到固定核心core上，采用轮询polling方式，提升cpu利用率，那么线程在所绑定core上的运行情况，将是实时监控重点关注的方向。

现有技术中，最常采用的实时监控记录方式是通过日志记录，记录过程中将产生大量的系统调用，在用户空间和内核空间不断切换，影响记录效率，而且实时监控与业务处理串行，输出实时监控日志时，势必影响业务处理速度，这种方式的时间代价与日志条数几乎成正比，而且当日志记录过多时会引发业务处理延时，对于实时性较高的系统是不允许的。若信息量过于庞大，甚至会阻塞正常的业务处理。

发明内容

为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。所述概括不是泛泛评述，也不是要确定关键／重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。

为了解决相关技术中存在的问题，本公开实施例公开了一种基于大页内存的存储监控系统及方法，用以解决现有技术中的面对实时性较高的系统，监控会影响业务处理从而导致被监控系统运行不流畅的问题。

在一些实施例中，提供了一种基于大页内存的存储监控系统，系统包括：周期管理器、数据收集器、数据生成器、中间扫描器和归档存储器；周期管理器，包括控制器和定时器；所述控制器，与数据收集器相连接，被配置为接收原始数据的预设信息类型指令，生成原始数据的预设信息类型并发送给数据收集器；所述定时器，分别与中间扫描器和数据生成器，被配置为接收预设时间指令，根据预设时间，周期性地发送dump指令给数据生成器；接收大页生成完毕指令，发送扫描指令给中间扫描器；数据收集器，设置在附着在I/O上，被配置为接收原始数据的信息类型；根据原始数据的信息类型，收集对应的原始数据，获得原始收集数据；数据生成器，设置在每个polling core上，与数据收集器相连接，被配置为接收原始收集数据，实时生成临时大页；接收dump指令，生成周期大页，发送大页生成完毕指令给定时器，且发送给中间扫描器；中间扫描器，被配置为接收扫描指令，扫描周期大页，生成监控数据，将监控数据发送给归档存储器；归档存储器，被配置为接收监控数据，将监控数据按照时间点生成时序数据链存入历史数据库，并提供监控数据的查询输出。

优选的，所述周期管理器为人机交互装置。

优选的，归档存储器包括数据存储接口和查询接口。