[发明专利]数据存储位置信息的管理方法和装置

说明书

技术领域

本申请属于云计算技术领域，具体地说，涉及一种数据存储位置信息的管理方法和装置。

背景技术

在大规模分布式文件系统中，为了达到容错、可用性、性能等方面的目的，一种常见设计是将文件切分为一系列的数据块，并在多个不同数据存储设备(Data Server)上存储同一个数据块的多个副本。这些数据副本的位置信息(即副本所在数据存储设备的存储位置)十分重要，它们是客户端(Client)读写数据时的寻址依据，也是进行数据分布控制、副本数量管理的信息来源。通常，文件系统的元数据服务器(Meta Server)会对系统中的副本位置信息进行存储和管理。

现有的技术方案主要为：在元数据服务器的内存结构中维护所有的数据副本的位置信息，不对其进行持久化存储。当系统运行时，元数据服务器与多个数据存储设备间不断通信，来持续获取并更新元数据服务器中的副本位置信息，记录当前最新的副本位置；客户端访问元数据服务器来获取“读”所需的副本位置，或者“写”所需的新副本位置。当元数据服务器发生冷启动或者重启时(例如由于故障或者升级需要)，由于内存的数据易失性，之前的副本位置信息全部丢失，元数据服务器直接从所有的数据存储设备上重新获取当前的副本位置信息。在一个数据存储设备的所有副本位置信息被获取前，该数据存储设备被认为是“恢复中”状态，元数据服务器不允许对其进行访问。大量数据存储设备处于“恢复中”状态时，分布式文件系统不对外提供服务。

元数据服务器重启时从所有的数据存储设备上重新获取当前数据副本 位置信息的用时较长。由于这段时间内系统无法对外服务，使得系统的故障恢复时间和升级用时变长，从而降低了系统的可用性、可运维性。

发明内容

有鉴于此，本申请提供了一种数据存储位置信息的管理方法和装置，以解决元数据服务器重启用时较长，导致分布式文件系统无法对外服务的时间较长的技术问题。

为了解决上述技术问题，本申请公开了一种数据存储位置信息的管理方法，包括：根据预设规则持久化保存内存状态，其中，所述内存状态包括数据存储位置信息和数据存储设备的状态信息；在重启之后，将内存状态恢复到重启前持久化保存的内存状态；根据所述数据存储设备的状态信息恢复正常状态的数据存储设备的访问。

为了解决上述技术问题，本申请还公开了一种数据存储位置信息的管理方法，包括：根据预设规则持久化保存内存状态，其中，所述内存状态包括数据存储位置信息和数据存储设备的状态信息；当出现不可用的数据存储位置信息时，对于与所述不可用的数据存储位置信息对应的数据，判断所述数据可用的数据存储位置信息的数量是否大于或等于预设门限；当所述数据可用的数据存储位置信息的数量大于或等于预设门限时，删除所述不可用的数据存储位置信息；当所述数据可用的数据存储位置信息的数量小于预设门限时，保存所述不可用的数据存储位置信息。

为了解决上述技术问题，本申请还公开了一种数据存储位置信息的管理装置，包括：持久化模块，用于根据预设规则持久化保存内存状态，其中，所述内存状态包括数据存储位置信息和数据存储设备的状态信息；内存恢复模块，用于在重启之后，将内存状态恢复到重启前持久化保存的内存状态；访问恢复模块，用于根据所述数据存储设备的状态信息恢复正常状态的数据存储设备的访问。

为了解决上述技术问题，本申请还公开了一种数据存储位置信息的管理装置，包括：持久化模块，用于根据预设规则持久化保存内存状态，其中， 所述内存状态包括数据存储位置信息和数据存储设备的状态信息；判断模块，用于当出现不可用的数据存储位置信息时，对于与所述不可用的数据存储位置信息对应的数据，判断所述数据可用的数据存储位置信息的数量是否大于或等于预设门限；删除模块，用于当所述数据可用的数据存储位置信息的数量大于或等于预设门限时，删除所述不可用的数据存储位置信息；保存模块，用于当所述数据可用的数据存储位置信息的数量小于预设门限时，保存所述不可用的数据存储位置信息。

与现有技术相比，本申请可以获得包括以下技术效果：缩短了元数据服务器重启时重建内存中数据存储位置信息的用时，减少了分布式文件系统无法对外服务的时长，提高了系统的可用性和可运维性。

当然，实施本申请的任一产品必不一定需要同时达到以上所述的所有技术效果。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1是本申请实施例的一种数据存储位置信息的管理方法的流程图；