[发明专利]数据表校验方法、装置、设备、存储介质及程序在审
| 申请号: | 202210552036.5 | 申请日: | 2022-05-18 |
| 公开(公告)号: | CN114996240A | 公开(公告)日: | 2022-09-02 |
| 发明(设计)人: | 赵可可;卞中明 | 申请(专利权)人: | 阿里云计算有限公司 |
| 主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/22 |
| 代理公司: | 北京同钧律师事务所 16037 | 代理人: | 吴梅锡;许怀远 |
| 地址: | 310024 浙江省*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据表 校验 方法 装置 设备 存储 介质 程序 | ||
本申请提供一种数据表校验方法、装置、设备、存储介质及程序,应用于数据处理技术领域。该方法包括:获取具有相同表结构的待校验数据表和参考数据表;对待校验数据表进行处理,得到包括至少一个第一记录的第一虚拟数据表,以及各第一记录在待校验数据表中的第一出现次数;对参考数据表进行处理,得到包括至少一个第二记录的第二虚拟数据表,以及各第二记录在参考数据表中的第二出现次数;根据第一虚拟数据表、第一虚拟数据表中各第一记录对应的第一出现次数、第二虚拟数据表、以及第二虚拟数据表中各第二记录对应的第二出现次数,确定待校验数据表和参考数据表是否一致。上述一致性校验过程不依赖主键,可适用于无主键的数据表校验场景。
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据表校验方法、装置、设备、存储介质及程序。
背景技术
在一些场景中,需要对两个数据表中的数据进行一致性校验。例如,数据迁移场景中,将源数据库迁移到目标数据库之后,需要对源数据库中的数据表和目标数据库中的数据表进行一致性校验,以确保数据迁移的准确性。
通常,在对两个数据表进行一致性校验时,需要基于主键(也可以称为唯一键)对两个数据表进行比对。以数据表a和数据表b为例,该两个数据表中均存在主键,将数据表a和数据表b中的同一主键对应的记录进行比对,以确定两个数据表中的数据是否一致。
然而,实际业务场景中,一些数据表中并不存在主键。针对无主键的两个数据表,如何进行一致性校验,是需要解决的技术问题。
发明内容
本申请实施例提供一种数据表校验方法、装置、设备、存储介质及程序,用提供一种针对无主键数据表的校验方式。
第一方面,本申请实施例提供一种数据表校验方法,包括:
获取待校验数据表和参考数据表,所述待校验数据表和所述参考数据表对应的表结构相同;
对所述待校验数据表进行处理,得到包括至少一个第一记录的第一虚拟数据表,并确定所述第一虚拟数据表中各第一记录在所述待校验数据表中的第一出现次数;其中,所述第一虚拟数据表中的各第一记录互不相同,每个第一记录在所述待校验数据表中至少出现一次;
对所述参考数据表进行处理,得到包括至少一个第二记录的第二虚拟数据表,并确定所述第二虚拟数据表中各第二记录在所述参考数据表中的第二出现次数;其中,所述第二虚拟数据表中的各第二记录互不相同,每个第二记录在所述参考数据表中至少出现一次;
根据所述第一虚拟数据表、所述第一虚拟数据表中各第一记录对应的第一出现次数、所述第二虚拟数据表、以及所述第二虚拟数据表中各第二记录对应的第二出现次数,确定所述待校验数据表和所述参考数据表是否一致。
一种可能的实现方式中,根据所述第一虚拟数据表、所述第一虚拟数据表中各第一记录对应的第一出现次数、所述第二虚拟数据表、以及所述第二虚拟数据表中各第二记录对应的第二出现次数,确定所述待校验数据表和所述参考数据表是否一致,包括:
根据所述第一虚拟数据表、所述第一虚拟数据表中各第一记录对应的第一出现次数、所述第二虚拟数据表、以及所述第二虚拟数据表中各第二记录对应的第二出现次数,生成第一差异记录集合,所述第一差异记录集合中包括:所述待校验数据表相较于所述参考数据表多余的M个记录;所述M为大于或等于0的整数;
根据所述第一虚拟数据表、所述第一虚拟数据表中各第一记录对应的第一出现次数、所述第二虚拟数据表、以及所述第二虚拟数据表中各第二记录对应的第二出现次数,生成第二差异记录集合,所述第二差异记录集合中包括:所述待校验数据表相较于所述参考数据表缺失的N个记录;所述N为大于或等于0的整数;
根据所述第一差异记录集合和所述第二差异记录集合,确定所述待校验数据表与所述参考数据表是否一致。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210552036.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:信件信息的数字化管理方法和装置
- 下一篇:毫克级砝码检定设备





