[发明专利]分布式文件系统PG选成员的方法、装置、设备及可读介质

说明书

本发明提供了一种分布式文件系统PG选成员的方法、装置、设备及可读介质，该方法包括：响应于OSD中有成员发生故障，通过crush算法和upmap纠正表计算发生故障的OSD中PG的新成员；响应于PG进行信息同步，判断故障的OSD中PG的新成员是否符合故障域；响应于故障的OSD中PG的新成员不符合故障域，将OSD中PG的新成员删除并使故障的OSD处于等待状态并向监控器发送消息；响应于监控器接收到消息，清除upmap纠正表中的信息后将新的osdmap表发送给故障的OSD；故障的OSD选取新的osdmap表中的成员作为PG的成员。通过使用本发明的方案，能够保障选取到的成员符合故障域，避免发生故障的情况造成的前端业务卡住和数据丢失的问题。

技术领域

本发明涉及计算机领域，并且更具体地涉及一种分布式文件系统PG选成员的方法、装置、设备及可读介质。

背景技术

对于分布式存储集群，PG(Placement Group，归置组，数据分布的一种逻辑单元)的成员是通过crush算法获取，crush算法是个伪随机算法，计算得出的PG成员分布并不是很均衡，为了提高集群的容量利用率，引入了upmap算法，upmap算法最终会得出一个纠正表，通过upmap表来纠正PG的成员列表，最终达到一个PG均衡分布的目的。

通过crush算法和upmap纠正表的纠正，我们可以达到PG均衡的目的，PG的成员要求是要符合故障域的，cursh算法计算的时候算出的up成员是符合故障域的，upmap算法计算的时候算出的纠正表替换后也是符合故障域的，但是当有故障发生的时候，PG的成员发生了变化，这个时候crush算法算出的是新的up成员，但是upmap算法的纠正表是有概率使得PG的up成员不符合故障域，最终在叠加故障发生的时候有可能造成数据丢失的结果。

发明内容

有鉴于此，本发明实施例的目的在于提出一种分布式文件系统PG选成员的方法、装置、设备及可读介质，通过使用本发明的技术方案，能够保障选取到的成员符合故障域，避免发生故障的情况造成的前端业务卡住和数据丢失的问题。

基于上述目的，本发明的实施例的一个方面提供了一种分布式文件系统PG选成员的方法，包括以下步骤：

响应于OSD(Object-based Storage Device，对象存储设备)中有成员发生故障，通过crush算法和upmap纠正表计算发生故障的OSD中PG的新成员；

响应于PG进行信息同步，判断故障的OSD中PG的新成员是否符合故障域；

响应于故障的OSD中PG的新成员不符合故障域，将OSD中PG的新成员删除并使故障的OSD处于等待状态并向监控器发送消息；

响应于监控器接收到消息，清除upmap纠正表中的信息后将新的osdmap表发送给故障的OSD；

故障的OSD选取新的osdmap表中的成员作为PG的成员。

根据本发明的一个实施例，响应于OSD中有成员发生故障，并通过crush算法和upmap纠正表计算发生故障的OSD中PG的新成员包括：

响应于OSD中有成员发生故障，将发生故障的OSD中的成员清除；

使用crush算法重新计算故障的OSD的成员，并通过upmap算法计算出故障的OSD的纠正表；

使用纠正表纠正crush算法计算出的成员，故障的OSD选取纠正后的成员作为PG的成员。

根据本发明的一个实施例，响应于PG进行信息同步，判断故障的OSD中PG的新成员是否符合故障域包括：

响应于PG进行信息同步，获取PG的新成员所在的节点信息；

判断每个新成员是否存在相同的节点信息；