[发明专利]一种数据验证方法、装置、电子设备及存储介质

说明书

本发明实施例公开了一种数据验证方法、装置、电子设备及存储介质，其中方法包括：获取目标数据表、源数据表以及所述目标数据表的属性信息，根据所述目标数据表的属性信息确定对所述目标数据表一致性验证的目标验证策略，获取所述源数据表的写数据状态，若所述源数据表的写数据状态为锁住状态，则根据所述目标验证策略验证所述目标数据表与所述源数据表是否一致；可自动对目标数据表与源数据表进行一致性验证，节省资源，提高验证效率。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据验证方法、装置、电子设备及存储介质。

背景技术

随着大数据时代的到来，大数据的应用和处理越来越频繁，大数据一致性对比成为大数据中的一个关键应用。比如，在数据管理系统更换时需要确定更换前后的大数据是否一致；算法优化前后计算结果是否一致；数据迁移前后是否一致等等。当前主要是通过人工对比的方式来验证目标数据与源数据是否一致，需要投入大量的时间和人力，效率较低。

发明内容

本发明实施例提供一种数据验证方法、装置、电子设备及存储介质，可自动对目标数据表与源数据表进行一致性验证，节省资源，提高验证效率。

第一方面，本发明实施例提供了一种数据验证方法，该方法包括：

获取目标数据表、源数据表以及所述目标数据表的属性信息，所述目标数据表的属性信息包括以下任一项或多项：所述目标数据表的数据量、所述目标数据表的类型、所述目标数据表被查询的次数以及所述目标数据表建立的时间；

根据所述目标数据表的属性信息确定对所述目标数据表一致性验证的目标验证策略，所述目标验证策略包括基于数据内容的验证策略或基于统计信息的验证策略；

获取所述源数据表的写数据状态，所述写数据状态包括锁住状态和未锁住状态，所述锁住状态用于指示暂停向所述源数据表写数据，所述未锁住状态可以指示向所述源数据表写数据；

若所述源数据表的写数据状态为锁住状态，则根据所述目标验证策略验证所述目标数据表与所述源数据表是否一致。

第二方面，本发明实施例提供了一种数据验证装置，该数据验证装置包括:

获取模块，用于获取目标数据表、源数据表以及所述目标数据表的属性信息，所述目标数据表的属性信息包括以下任一项或多项：所述目标数据表的数据量、所述目标数据表的类型、所述目标数据表被查询的次数以及所述目标数据表建立的时间；

确定模块，用于根据所述目标数据表的属性信息确定对所述目标数据表一致性验证的目标验证策略，所述目标验证策略包括基于数据内容的验证策略或基于统计信息的验证策略；

所述获取模块，还用于获取所述源数据表的写数据状态，所述写数据状态包括锁住状态和未锁住状态，所述锁住状态用于指示暂停向所述源数据表写数据，所述未锁住状态可以指示向所述源数据表写数据；

验证模块，用于若所述源数据表的写数据状态为锁住状态，则根据所述目标验证策略验证所述目标数据表与所述源数据表是否一致。

第三方面，本发明实施例提供了一种电子设备，该电子设备包括:处理器，适于实现一条或一条以上指令；以及，

计算机可读存储介质，所述计算机可读存储介质存储有一条或一条以上指令，所述一条或一条以上指令适于由所述处理器加载并执行如步骤：

获取目标数据表、源数据表以及所述目标数据表的属性信息，所述目标数据表的属性信息包括以下任一项或多项：所述目标数据表的数据量、所述目标数据表的类型、所述目标数据表被查询的次数以及所述目标数据表建立的时间；

根据所述目标数据表的属性信息确定对所述目标数据表一致性验证的目标验证策略，所述目标验证策略包括基于数据内容的验证策略或基于统计信息的验证策略；