[发明专利]数据写入和数据恢复方法、装置、电子设备及存储介质有效
申请号: | 201710970919.7 | 申请日: | 2017-10-18 |
公开(公告)号: | CN108572793B | 公开(公告)日: | 2021-09-10 |
发明(设计)人: | 袁冬 | 申请(专利权)人: | 北京金山云网络技术有限公司;北京金山云科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 马敬;项京 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 写入 恢复 方法 装置 电子设备 存储 介质 | ||
本发明实施例提供了一种数据写入和数据恢复方法、装置、电子设备及存储介质,方法包括:接收客户端发送的针对目标数据的写入请求;将写入请求发送给目标数据的所有数据副本对应的存储服务器;若存在无法被写入成功的所述目标数据的离线数据副本,确定除所述离线数据副本对应的第一存储服务器之外的用于存储所述目标数据的其他数据副本的其他存储服务器;在接收到所有所述其他存储服务器中的两个或两个以上的存储服务器反馈的对应的数据副本写入成功的响应消息后,向所述客户端返回所述目标数据写入成功的消息。应用本发明实施例提供的方案,减少了用户的等待时间,提高了用户体验。
技术领域
本发明涉及分布式存储技术领域,特别是涉及一种数据写入和数据恢复方法、装置、电子设备及存储介质。
背景技术
随着网络技术的发展,为了方便使用,用户选择将数据集中存储到存储系统中。但是,随着网络上的数据量越来越大,用于集中存储数据的存储服务器的性能无法满足需求,而且一旦该服务器出现故障,用户则无法对该服务器上存储的目标数据进行写入操作,一般情况下,写入操作为创建或者修改操作。为了解决集中存储大规模数据对服务器性能要求过高的问题,以及数据存储的可靠性问题,存储系统通常采用分布式存储系统。
分布式存储系统是将目标数据切分成多个子目标数据,并将多个子目标数据分别存储在不同的存储服务器上,当用户需要对目标数据进行写入操作时,原来由一台服务器提供的服务现在由多台服务器提供,实现了服务负荷的分担,降低了目标数据存储对存储服务器性能的要求;另外,当多台存储服务器中的一台服务器发生故障,会导致故障存储服务器上存储的子目标数据不能被执行写入操作,而不会导致所有子目标数据不能被写入。虽然分布式存储技术解决了集中存储大规模的目标数据的对服务器性能要求过高的问题,并且提高了目标数据存储的可靠性问题,但是被存储的子目标数据只有一份。当其中一台存储服务器发生故障导致该存储服务器上的子目标数据发生了损坏时,由于数据只有一份,会导致该存储服务器存储的子目标数据无法恢复,因此分布式存储技术仍然存在数据存储可靠性的技术问题。
鉴于此,目前采用强一致性数据冗余技术用于进一步提高分布式数据存储的可靠性。强一致性数据冗余技术是指将同样的目标数据在不同的存储服务器上分别存储多份,常见的是存储三份,这三份数据完全一样,因此,这三份数据均被称为目标数据的数据副本。当用户需要对存储的目标数据进行写入操作时,只有在所有的数据副本都写入成功的情况下,存储系统才会认定该写入操作执行成功。一般来说,所有数据副本中越多的数据副本被写入成功,目标数据的存储可靠性越高。
但是现有技术采用的是强一致性写入逻辑:需要在目标数据的所有的数据副本都被写入成功的情况下,存储系统才会认定该写入操作执行成功。如果有一个数据副本的存储服务器发生了故障导致该数据副本离线,也就是不能被写入时,该写入操作就会被挂起,直到该数据副本被恢复后,并被写入成功后,才会向用户返回写入成功的消息。通常情况下,用户等待的时间通常达到数十秒甚至分钟级别,这将导致用户体验较差。
发明内容
本发明实施例的目的在于提供一种数据写入和数据恢复方法、装置、电子设备及存储介质,以实现提高用户体验的目的。具体技术方案如下:
第一方面,为达到上述目的,本发明实施例提供了一种数据写入方法,应用于分布式存储系统中的网关设备,方法包括:
接收客户端发送的针对目标数据的写入请求;
将写入请求发送给目标数据的所有数据副本对应的存储服务器;
若存在无法被写入成功的目标数据的离线数据副本,确定除离线数据副本对应的第一存储服务器之外的用于存储目标数据的其他数据副本的其他存储服务器,其中,第一存储服务器为存储离线数据副本的存储服务器;
在接收到所有其他存储服务器中的两个或两个以上的存储服务器反馈的对应的数据副本写入成功的响应消息的情况后,向客户端返回目标数据写入成功的消息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710970919.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置