[发明专利]数据监测方法及装置在审
| 申请号: | 201911238270.5 | 申请日: | 2019-12-05 |
| 公开(公告)号: | CN111143159A | 公开(公告)日: | 2020-05-12 |
| 发明(设计)人: | 姚正 | 申请(专利权)人: | 江苏东智数据技术股份有限公司 |
| 主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/215 |
| 代理公司: | 北京卓唐知识产权代理有限公司 11541 | 代理人: | 卜荣丽 |
| 地址: | 224005 江苏省盐城市城南*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 监测 方法 装置 | ||
本申请公开了一种数据监测方法及装置、计算机设备及可读存储介质。该方法包括:获取待监测的数据对象,所述数据对象中包括至少一个或多个数据字段;按照第一监测规则开始对所述待监测的数据对象进行监测,以得到第一监测结果;根据所述第一监测结果确定第二监测规则,以根据所述第二监测规则对经过所述第一监测规则抽查后得到的数据对象进行监测得到第二监测结果;根据所述第二监测结果判断是否终止对所述数据对象的监测。本申请解决了相关技术中的数据质量监测方法由于缺少对数据长期动态的监测导致数据质量评估效率低下的技术问题。通过本申请,达到了对数据进行长期动态监测的目的,从而提高了数据监测效率和准确率。
技术领域
本申请涉及数据监测技术领域,具体而言,涉及一种数据监测方法及装置、计算机设备及可读存储介质。
背景技术
数据质量是软件系统生命的关键因素,由于软件开发人员的水平差异和软件产品测试工作的不足,往往会在系统中遗留大量的数据质量隐患。通常情况下,软件开发企业会通过大量的设计、研发和测试工作来弥补这一工作的不足,但还是存在一定的不可确定性,比如一些潜在的数据质量问题会在长期使用中才会凸显出来。现有技术无法通过长期自动化的方式来发现这样的问题,影响了对系统数据质量的有效把控,进而威胁了软件系统的有效运行和使用。
针对相关技术中的数据质量监测方法由于缺少对数据长期动态的监测导致数据质量评估效率低下的问题,目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种数据监测方法及装置、计算机设备及可读存储介质,以解决相关技术中的数据质量监测方法由于缺少对数据长期动态的监测导致数据质量评估效率低下的问题。
为了实现上述目的,根据本申请的第一方面,提供了一种数据监测方法。
根据本申请的数据监测方法包括:获取待监测的数据对象,所述数据对象中包括至少一个或多个数据字段;按照第一监测规则开始对所述待监测的数据对象进行监测,以得到第一监测结果;根据所述第一监测结果确定第二监测规则,以根据所述第二监测规则对经过所述第一监测规则抽查后得到的数据对象进行监测得到第二监测结果;根据所述第二监测结果判断是否终止对所述数据对象的监测。
进一步地,所述第一监测规则包括第一抽查字段数量,所述按照第一监测规则开始对所述待监测的数据对象进行监测,以得到第一监测结果包括:获取预设数据字段分组,所述预设数据字段分组包括随机组和/或焦点组;根据所述第一抽查字段数量将对应的第一数据字段加入所述随机组进行抽查,以确定所述第一数据字段中的异常字段;将所述第一数据字段中的异常字段加入所述焦点组,并清空所述随机组。
进一步地,所述第二监测规则包括第二抽查字段数量,所述将所述第一数据字段中的异常字段加入所述焦点组,并清空所述随机组之后包括:根据所述第一抽查字段数量和所述第一数据字段中的异常字段数量确定所述第二抽查字段数量;根据所述第二抽查字段数量将对应的第二数据字段加入所述随机组进行抽查,以确定所述第二数据字段中的异常字段;将所述第二数据字段中的异常字段加入所述焦点组,并清空所述随机组。
进一步地,所述根据所述第二监测结果判断是否终止对所述数据对象的监测包括:获取预设工作量参数,所述预设工作量参数包括对所述待监测的数据对象进行全局遍历的预设次数;判断当前对所述待监测的数据对象进行全局遍历的次数是否达到预设次数;根据判断结果确定是否终止对所述待监测的数据对象的监测。
进一步地,所述第一监测规则和所述第二监测规则均包括数据字段检测规则,所述获取待监测的数据对象之后包括:获取所述数据字段检测规则,所述数据字段检测规则包括数据字段是否为空、数据字段与类型是否匹配、数据字段有效性以及数据字段是否符合业务逻辑中的一种或多种;根据所述数据字段检测规则对所述数据字段进行抽查,以得到数据字段抽查结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏东智数据技术股份有限公司,未经江苏东智数据技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911238270.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于可编辑工作流的智能财务稽核平台
- 下一篇:无线电波路径预测方法和装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





