[发明专利]大数据平台运行状态的监控系统、计算机设备、终端、介质

说明书

本发明属于平台监控技术领域，公开了一种大数据平台运行状态的监控系统、计算机设备、终端、介质，系统包括平台信息获取模块、信息转换与传输模块、信息接收与转换模块、信息分析模块、中央控制模块、运行流程获取模块、监控节点部署模块、运行监控模块、任务类型获取模块、运行状态判定模块。本发明实现对监控节点的预先部署，方便进行平台运行信息的监控；在进行监控节点部署前进行平台的运行流程的获取，能够实现部署的监控节点与平台运行各阶段的一一对应，进行平台的各阶段运行信息获取更加准确，克服了准确性偏低的问题，实现对大数据平台的运行状态进行准确监控，还保证了大数据平台的运行效率。

技术领域

本发明属于平台监控技术领域，尤其涉及一种大数据平台运行状态的监控系统、计算机设备、终端、介质。

背景技术

目前：随着社会信息化程度的不断提高，在诸多业务领域产生了海量、实时的数据。当前大数据分析逐渐以非结构化为主，单机存储空间与运算能力难以满足需求，所以基于分布式的hadoop集群、spark集群和storm集群等大数据系统被广泛应用。大数据集群系统通常部署了成百上千个节点，节点规模的扩展不仅使大数据平台的集群资源配置与服务部署维护等越发困难，而且也使大数据平台的计算作业的提交、调度、重试及撤销告警等任务耗时耗力。

监控是大数据平台的重要组成部分，大数据系统的动态性、复杂性给大数据平台运行状态的监控带来了诸多困难，如何对集群软硬件资源及不同粒度的作业进行有效监控和预警，并在出现故障时及时采取措施，是提高大数据平台计算准确性与时效性的关键。现有的进行大数据平台的监控的方案是通过监控大数据平台的各个服务组件的服务情况来获取大数据平台的运行状态，难以监控到大数据平台的具体业务需求，进行运行状态的获取的准确性偏低。

通过上述分析，现有技术存在的问题及缺陷为：现有的进行大数据平台的监控的方案是通过监控大数据平台的各个服务组件的服务情况来获取大数据平台的运行状态，难以监控到大数据平台的具体业务需求，进行运行状态的获取的准确性偏低。

发明内容

针对现有技术存在的问题，本发明提供了一种大数据平台运行状态的监控系统、计算机设备、终端、介质。

本发明是这样实现的，一种大数据平台运行状态的监控系统，所述大数据平台运行状态的监控系统包括：

平台信息获取模块、信息转换与传输模块、信息接收与转换模块、信息分析模块、中央控制模块、运行流程获取模块、监控节点部署模块、运行监控模块、任务类型获取模块、运行状态判定模块；

平台信息获取模块，与中央控制模块连接，用于通过平台信息获取程序进行大数据平台建设信息的获取，得到大数据平台建设信息；

信息转换与传输模块，与中央控制模块连接，用于通过信息转换与传输程序进行大数据平台建设信息的转换并对转换信息进行传输；

所述通过信息转换与传输程序进行大数据平台建设信息的转换并对转换信息进行传输，包括：

确定A/D转换对象的物理量与对应电压值之间的线性关系；

判断当前物理量下测量的电压值是否存在偏差，若存在偏差，主控机进行A/D转换校准；

在完成校准后进行大数据平台建设信息的转换得到转换信息；

所述进行大数据平台建设信息的转换得到转换信息，包括：

连接并设置主控机的参数以及测试主控机的运行特性；所述测试主控机的运行特性，包括：使主控机处于速度模式下，使主控机进行控制和校正，保证速度内环性能稳定；将设计的MFAC控制算法在上位PC机上通过cSPACE的Simulink搭建好；运行MFAC主控机中的编译模块；将MFAC算法自动生成DSP代码；通过上位PC机的USB接口将代码下载到数字信号处理器中运行，经过主控机，生成电压输出信号，驱动主控机运行；