[发明专利]一种数据落盘方法、装置、设备及可读存储介质有效
申请号: | 201811544543.4 | 申请日: | 2018-12-17 |
公开(公告)号: | CN109669634B | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 张露露 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 方法 装置 设备 可读 存储 介质 | ||
本发明公开了一种数据落盘方法,该方法能够在数据落盘过程中,当具有相同操作标识的OSD的操作对象属性中存在不小于K个相同的操作对象属性时,认为本次落盘操作执行成功,并使等待commit操作超时的OSD均执行commit操作,以确保当前数据落盘操作成功完成,即保障了写入操作过程中数据的正常落盘。相应地,本发明公开的一种数据落盘装置、设备及可读存储介质,也同样具有上述技术效果。
技术领域
本发明涉及数据存储技术领域,更具体地说,涉及一种数据落盘方法、装置、设备及可读存储介质。
背景技术
在分布式文件系统中,现有的数据写入流程为:客户端计算纠删码,并将计算得到的各个数据块发送至服务端缓存,服务端缓存为这些数据块对应分配OSD,并确定每个OSD要进行落盘的具体数据,同时使分配的各个OSD进入等待落盘流程;与此同时,服务端将分配信息返回至客户端,客户端核对这些分配信息后,发送commit操作至各个等待的OSD,以使各个OSD完成数据落盘操作。本申请中的OSD指代Object Storage Device(对象存储设备)。
在上述数据写入过程中,若服务端缓存为当前要落盘的数据分配的OSD有误,或各个OSD要进行落盘操作的数据的属性信息不一致,客户端在核对分配信息时将报错,那么客户端就不能及时发送commit操作至各个等待的OSD,进一步就会导致等待commit操作的OSD等待超时,如此将会导致数据落盘失败或无效。
因此,如何保障写入操作过程中数据的正常落盘,是本领域技术人员需要解决的问题。
发明内容
本发明的目的在于提供一种数据落盘方法、装置、设备及可读存储介质,以保障写入操作过程中数据的正常落盘。
为实现上述目的,本发明实施例提供了如下技术方案:
一种数据落盘方法,包括:
当对K+M个纠删数据块进行落盘操作时,判断OSD集合中是否存在等待commit操作超时的OSD;所述OSD集合为对所述K+M个纠删数据块进行落盘操作的OSD组成的集合;
若是,则查询所述OSD集合中的每个OSD的操作标识,将具有相同操作标识的OSD作为目标OSD,并查询所有目标OSD的操作对象属性,获得操作对象属性集合;
当所述操作对象属性集合中存在不小于K个相同的操作对象属性时,将所述不小于K个相同的操作对象属性确定为目标属性;
将所述OSD集合中的每个OSD的操作对象属性统一为所述目标属性,并使所述等待commit操作超时的OSD执行commit操作,以完成所述K+M个纠删数据块的落盘操作。
其中,所述当所述操作对象属性集合中存在不小于K个相同的操作对象属性时,将所述不小于K个相同的操作对象属性确定为目标属性之前,还包括:
判断具有不同操作标识的OSD的操作对象是否存在;
若是,则查询所述具有不同操作标识的OSD的操作对象属性,并将所述具有不同操作标识的OSD的操作对象属性添加至所述操作对象属性集合。
其中,还包括:
当具有不同操作标识的OSD的操作对象不存在时,将所述具有不同操作标识的OSD的操作对象属性标记为丢失。
其中,所述将所述OSD集合中的每个OSD的操作对象属性统一为所述目标属性,包括:
在所述OSD集合中查询操作对象属性不为所述目标属性的OSD,将所述操作对象属性不为所述目标属性的OSD的操作对象属性作为待修改属性;
将所述待修改属性修改为所述目标属性。
其中,所述判断OSD集合中是否存在等待commit操作超时的OSD,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811544543.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置