[发明专利]大数据监控方法、装置、电子设备及计算机存储介质在审
申请号: | 202110110228.6 | 申请日: | 2021-01-27 |
公开(公告)号: | CN112817937A | 公开(公告)日: | 2021-05-18 |
发明(设计)人: | 杨恺;王洋 | 申请(专利权)人: | 上海臣星软件技术有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/215;G06F16/28 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 彭琼 |
地址: | 201802 上海市嘉*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 监控 方法 装置 电子设备 计算机 存储 介质 | ||
本申请提供了一种大数据监控方法、装置、电子设备及计算机存储介质。该大数据监控方法,包括:获取前端规则配置信息;基于前端规则配置信息,从预设的脚本注册表中确定目标大数据监控脚本;其中,脚本注册表中包括至少两个大数据监控脚本;基于目标大数据监控脚本检查大数据。根据本申请实施例,能够提高大数据质量保障系统的大数据监控能力。
技术领域
本申请属于商业化大数据监控技术领域,尤其涉及一种大数据监控方法、装置、电子设备及计算机存储介质。
背景技术
目前,大数据质量保障系统针对大数据的常用监控功能是通过用配置项来实现,无代码就完成平常需要写脚本才能实现的监控功能。其中,功能监控包括定时检查指定的数据量,空字段量,数据量的突增突降等。但是,对于复杂的检查项就无能为力。
因此,如何提高大数据质量保障系统的大数据监控能力是本领域技术人员亟需解决的技术问题。
发明内容
本申请实施例提供一种大数据监控方法、装置、电子设备及计算机存储介质,能够提高大数据质量保障系统的大数据监控能力。
第一方面,本申请实施例提供一种大数据监控方法,包括:
获取前端规则配置信息;
基于前端规则配置信息,从预设的脚本注册表中确定目标大数据监控脚本;其中,脚本注册表中包括至少两个大数据监控脚本;
基于目标大数据监控脚本检查大数据。
可选的,基于前端规则配置信息,从预设的脚本注册表中确定目标大数据监控脚本,包括:
基于前端规则配置信息,确定目标大数据监控脚本的脚本名称;
根据脚本名称,从脚本注册表中确定目标大数据监控脚本。
可选的,在基于前端规则配置信息,确定目标大数据监控脚本的脚本名称之后,方法还包括:
将前端规则配置信息和脚本名称存储至mysql数据库中。
可选的,基于目标大数据监控脚本检查大数据,包括:
控制任务调度系统读取mysql数据库中存储的前端规则配置信息,以确定目标大数据监控脚本;
基于目标大数据监控脚本检查大数据。
第二方面,本申请实施例提供了一种大数据监控装置,包括:
获取模块,用于获取前端规则配置信息;
确定模块,用于基于前端规则配置信息,从预设的脚本注册表中确定目标大数据监控脚本;其中,脚本注册表中包括至少两个大数据监控脚本;
检查模块,用于基于目标大数据监控脚本检查大数据。
可选的,确定模块,用于:基于前端规则配置信息,确定目标大数据监控脚本的脚本名称;根据脚本名称,从脚本注册表中确定目标大数据监控脚本。
可选的,装置还包括存储模块,用于将前端规则配置信息和脚本名称存储至mysql数据库中。
可选的,检查模块,用于控制任务调度系统读取mysql数据库中存储的前端规则配置信息,以确定目标大数据监控脚本;基于目标大数据监控脚本检查大数据。
第三方面,本申请实施例提供了一种电子设备,电子设备包括:处理器以及存储有计算机程序指令的存储器;
处理器执行计算机程序指令时实现如第一方面所示的大数据监控方法。
第四方面,本申请实施例提供了一种计算机存储介质,计算机存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现如第一方面所示的大数据监控方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海臣星软件技术有限公司,未经上海臣星软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110110228.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置