[发明专利]数据一致性比对方法、装置、存储介质及电子设备在审

专利信息
申请号: 201810623674.5 申请日: 2018-06-15
公开(公告)号: CN108897806A 公开(公告)日: 2018-11-27
发明(设计)人: 王政操;肖宇 申请(专利权)人: 东软集团股份有限公司
主分类号: G06F17/30 分类号: G06F17/30
代理公司: 北京英创嘉友知识产权代理事务所(普通合伙) 11447 代理人: 曾尧;魏嘉熹
地址: 110179 辽*** 国省代码: 辽宁;21
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 校验数据 分片数据 第一端 数据分片 比对 数据一致性 标识信息 存储介质 电子设备 存储 发送
【说明书】:

本公开涉及一种数据一致性比对方法、装置、存储介质及电子设备,用于解决现有技术中数据一致性比对效率较低的技术问题。该方法包括:向第一端以及第二端发送数据切分消息,数据切分消息包括数据分片策略以及校验数据格式;获取第一端以及第二端发送的数据分片结果,数据分片结果包括每一分片数据的校验数据以及每一分片数据的标识信息,其中,分片数据是第一端以及第二端根据分片策略对自身存储的数据进行划分得到的,校验数据是第一端以及第二端按照校验数据格式针对每一分片数据生成的;比对具有相同标识信息的数据分片结果中的校验数据,其中,若校验数据相同,则表明第一端和第二端中标识信息对应的分片数据一致。

技术领域

本公开涉及数据存储技术领域,具体地,涉及一种数据一致性比对方法、装置、存储介质及电子设备。

背景技术

在数据库技术的应用领域中,可以从源存储设备中读取数据,并将数据通过中间存储媒介或网络存储至目标存储设备上,以生成数据副本。然而,由于网络、服务器或者软件出现故障,可能会导致部分数据内容不一致或因写入失败而丢失。因此,在对数据库中的数据进行复制时,需要验证源存储设备与目标存储设备中的数据是否一致,以确保数据的安全。

在相关技术中,数据库之间的数据进行一致性比对时,是将源存储设备与目标存储设备中的原始数据按照比对中心端制定的分片策略切分,得到分片数据,并将源存储设备与目标存储设备中的同一分片数据依次上传至比对中心端进行比对。这样,在海量数据或者网络带宽有限的应用场景下,数据上传会耗费大量网络带宽与等待时间,形成性能瓶颈,造成数据一致性比对效率低。

发明内容

本公开的目的是提供一种数据一致性比对方法、装置、存储介质及电子设备,用于解决现有技术中数据一致性比对效率较低的技术问题。

为了实现上述目的,本公开第一方面提供一种数据一致性比对方法,应用于比对端,所述方法包括:

向第一端以及第二端发送数据切分消息,所述数据切分消息包括数据分片策略以及校验数据格式;

获取所述第一端以及所述第二端发送的数据分片结果,所述数据分片结果包括每一分片数据的校验数据以及每一分片数据的标识信息,其中,所述分片数据是所述第一端以及所述第二端根据所述分片策略对自身存储的数据进行划分得到的,所述校验数据是所述第一端以及所述第二端按照所述校验数据格式针对每一分片数据生成的;

比对具有相同标识信息的数据分片结果中的校验数据,其中,若所述校验数据相同,则表明所述第一端和所述第二端中所述标识信息对应的分片数据一致。

可选地,所述方法还包括:

在获取所述第一端以及所述第二端发送的数据分片结果之后,将所述第一端发送的数据分片结果存储至第一缓存中,将所述第二端发送的数据分片结果存储至第二缓存中;

所述比对具有相同标识信息的数据分片结果中的校验数据,包括:

启动多个线程分别读取所述第一缓存中以及所述第二缓存中具有相同标识信息的数据分片结果中的校验数据;

判断具有相同标识信息的数据分片结果中的校验数据是否相同。

可选地,所述方法还包括:

若具有相同标识信息的数据分片结果中的校验数据相同,则向所述第一端以及所述第二端发送缓存清除指令;

其中,所述缓存清除指令用于指示所述第一端以及所述第二端清除相同校验数据所对应的分片数据的缓存。

可选地,所述方法还包括:

若具有某一相同标识信息的数据分片结果中的校验数据不相同,则向所述第一端以及所述第二端发送数据回送请求;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810623674.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top