[发明专利]数据获取方法、装置、设备和存储介质在审
申请号: | 201911320945.0 | 申请日: | 2019-12-19 |
公开(公告)号: | CN113010488A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 徐攀登;黄晓婧;韩翼 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F11/30 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 钱秀茹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 获取 方法 装置 设备 存储 介质 | ||
本申请实施例提供了数据获取方法、装置、设备和存储介质,该方法包括:获取目标数据库对应的数据配置信息,所述数据配置信息用于确定所述目标数据库中的待稽核数据;依据所述目标数据库,解析所述数据配置信息,得到所述目标数据库对应的实例化数据配置信息;依据所述实例化数据配置信息,生成数据获取任务,所述数据获取任务用于从所述目标数据库中获取所述待稽核数据。通用性较强,且待稽核数据的获取更加的便捷。
技术领域
本申请涉及计算机技术领域,特别是涉及一种数据获取方法和装置、一种电子设备和一种存储介质。
背景技术
数据质量稽核是数据生命周期中生产、加工、传输、存储、使用、交换等各个环节的数据质量控制。通常根据数据质量规则配置来检测数据质量是否满足数据使用方要求,目前从数据完整性、数据一致性、数据及时性、数据准确性和数据逻辑性等进行数据质量规则配置和稽核,对于质量规则不通过的规则进行监控报警。
现有的数据质量获取方法,首先获取待稽核数据,之后将待稽核数据与阈值进行比较,以判断待稽核数据的数据质量。获取待稽核数据的过程主要通过预先设定好的数据获取程序,通过执行数据获取程序,以从目标数据库中获取待稽核数据。
但是利用这种方法,数据获取程序仅能适用于同一个存储类型的数据库,即若需要获取多个类型的数据库中的数据,需要设定多个数据获取程序来获取数据,待稽核数据的获取十分不便捷。
发明内容
本申请实施例提供了一种数据获取方法,以便捷的获取待稽核数据。
相应的,本申请实施例还提供了一种数据处理装置、一种电子设备以及一种存储介质,用以保证上述方法的实现及应用。
为了解决上述问题,本申请实施例公开了一种数据获取方法,包括:获取目标数据库对应的数据配置信息,所述数据配置信息用于确定所述目标数据库中的待稽核数据;依据所述目标数据库,解析所述数据配置信息,得到所述目标数据库对应的实例化数据配置信息;依据所述实例化数据配置信息,生成数据获取任务,所述数据获取任务用于从所述目标数据库中获取所述待稽核数据。
本申请实施例还公开了一种数据获取方法,包括:获取目标数据源对应的数据配置信息,所述数据配置信息用于确定所述目标数据源中的待稽核数据;依据所述目标数据源,解析所述数据配置信息,得到所述目标数据源对应的实例化数据配置信息;依据所述实例化数据配置信息,生成数据获取任务,所述数据获取任务用于从所述目标数据源中获取所述待稽核数据。
本申请实施例还公开了一种数据获取装置,所述装置包括:配置信息获取模块,用于获取目标数据库对应的数据配置信息,所述数据配置信息用于确定所述目标数据库中的待稽核数据;解析模块,用于依据所述目标数据库,解析所述数据配置信息,得到所述目标数据库对应的实例化数据配置信息;任务生成模块,用于依据所述实例化数据配置信息,生成数据获取任务,所述数据获取任务用于从所述目标数据库中获取所述待稽核数据。
本申请实施例还公开了一种数据获取装置,所述装置包括:配置信息获得模块,用于获取目标数据源对应的数据配置信息,所述数据配置信息用于确定所述目标数据源中的待稽核数据;解析处理模块,用于依据所述目标数据源,解析所述数据配置信息,得到所述目标数据源对应的实例化数据配置信息;任务获得模块,用于依据所述实例化数据配置信息,生成数据获取任务,所述数据获取任务用于从所述目标数据源中获取所述待稽核数据。
本申请实施例还公开了一种电子设备,包括:处理器;和存储器,其上存储有可执行代码,当所述可执行代码被执行时,使得所述处理器执行如上述一个或多个实施例所述的数据获取方法。
本申请实施例还公开了一个或多个机器可读介质,其上存储有可执行代码,当所述可执行代码被执行时,使得处理器执行如上述一个或多个实施例所述的数据获取方法。
与现有技术相比,本申请实施例包括以下优点:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911320945.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置