[发明专利]全局文件标识生成方法、生成装置及相应的分布式文件系统

说明书

技术领域

本发明涉及数据存储领域，特别是涉及一种分布式文件系统的全局文件标识生成方法、生成装置及相应的分布式文件系统。

背景技术

目前在工业界广泛应用分布式文件系统进行数据的存储读写。一般分布式文件系统包括多个元数据服务器，分布式文件系统的文件的元信息（即文件标识）均存储在各个元数据服务器中。由于文件的元信息包括路径、服务器IP地址、所有者、备份数、创建时间、修改时间、访问时间、版本、文件大小、文件数据块的个数以及每个数据块的元信息等，数据块的元信息又包括数据块的版本、有效长度以及校验码等。由于需要通过文件的元信息读取分布式文件系统中的文件，同时文件的元信息构成比较复杂，这样使得分布式文件系统的每个元数据服务器均有较大文件传输和路径计算的成本，同时不利于进行各文件读写操作的统计。

为了减少读写文件时的数据传输量以及各文件读写的统计。现有的分布式文件系统还设置有一个主元数据服务器，用户通过该主元数据服务器与各个元数据服务器连接，由于主元数据服务器上记载了每个文件的元信息，这样可以大大减小用户和元数据服务器之间的数据通信量，用户只需要从主元数据服务器获取与该文件元信息相应的全局文件标识，即可对相应的元数据服务器上文件进行读写操作。现有的全局文件标识包括文件所在的元数据服务器的IP地址、备份数、版本、文件大小、文件数据块的个数以及每个数据块的元信息，虽然用户可以根据该全局文件标识直接定位到文件所在的元数据服务器，但是该全局文件标识通常有几十字节，传输及存储该全局文件标识的成本依然太大。

故，有必要提供一种分布式文件系统的全局文件标识生成方法、生成装置及相应的分布式文件系统，以解决现有技术所存在的问题。

发明内容

本发明的目的在于提供一种可节约元数据服务器的存储以及传输数据的资源，又可有效的保证每个文件的标识唯一性的全局文件标识生成方法、生成装置及相应的分布式文件系统；解决了现有的分布式文件系统的全局文件标识容量太大导致存储及传输该全局文件标识成本过大的技术问题。

为解决上述问题，本发明提供的技术方案如下：

本发明涉及一种分布式文件系统的全局文件标识生成方法，其中，所述分布式文件系统包括至少一个主元数据服务器以及多个元数据服务器，所述元数据服务器用于存储及读写文件，所述主元数据服务器用于根据所述文件的元信息生成相应的全局文件标识，所述全局文件标识生成方法包括步骤：

接收到文件创建请求时，根据被创建文件所在元数据服务器的编号生成所述全局文件标识的服务器编号字段；以及

根据所述全局文件标识在所述主元数据服务器中的创建编号生成所述全局文件标识的文件顺序字段；

不同的所述全局文件标识在所述主元数据服务器中的创建编号不同。

在本发明所述的分布式文件系统的全局文件标识生成方法中，所述文件顺序字段根据所述全局文件标识的实际创建时间严格递增。

在本发明所述的分布式文件系统的全局文件标识生成方法中，所述根据所述全局文件标识在所述主元数据服务器中的创建编号生成所述全局文件标识的文件顺序字段的步骤包括：

根据所述全局文件标识在所述主元数据服务器中的创建时间生成所述文件顺序字段的创建时间子字段；以及

根据所述创建时间子字段相同的所述全局文件标识的创建编号生成所述文件顺序字段的创建顺序子字段。

在本发明所述的分布式文件系统的全局文件标识生成方法中，如当前时间创建文件的全局文件标识的数量A1小于等于当前时间的创建顺序子字段所能表示全局文件标识的数量A2，则根据所述全局文件标识的创建顺序使用当前时间的创建时间子字段和相应的创建顺序子字段来表示当前时间所创建文件的所述全局文件标识；

如当前时间创建文件的全局文件标识的数量A1大于当前时间的创建顺序子字段所能表示的全局文件标识的数量A2，且相同创建时间子字段的创建顺序子字段所能表示的全局文件标识的最大数量为A3，则根据所述全局文件标识的创建顺序使用当前时间的创建时间子字段和相应的创建顺序子字段、以及下n秒的创建时间子字段和相应的创建顺序子字段来表示当前时间所创建文件的所述全局文件标识；其中n为[(A1-A2)/A3]的向上取整。

在本发明所述的分布式文件系统的全局文件标识生成方法中，所述分布式文件系统的全局文件标识生成方法还包括步骤：

在所述全局文件标识内设置扩展数据字段，所述扩展数据字段用于进行所述全局文件标识的数据扩展；