[发明专利]一种海量元数据缓存加速的方法

说明书

本发明公开了一种海量元数据缓存加速的方法，包括以下步骤：增加非易失性内存作为扩展缓存；将元数据区分为第一热度数据、第二热度数据和第三热度数据；将第一热度数据存储在内存中，将第二热度数据存储在扩展缓存中，将第三热度数据存储在外存中。本发明公开的海量元数据缓存加速的方法，减少了SSD读取数据的操作，从而降低时延，最大限度的加速元数据的访问速度。

技术领域

本发明涉及存储技术领域，尤其涉及一种海量元数据缓存加速的方法。

背景技术

现在数据量日益增大，对存储和读取元数据也提出更高的要求。元数据放在内存里读取最快。但是对于海量的元数据，内存始终是一种稀缺资源，从价格和容量的角度，元数据不能全部放入内存。与内存相对应的外存是容量更大。可对于计算机系统来说，并不识别外存，需要操作系统(OS)把发出的内存访问需求转化为硬盘读写操作。操作系统知道数据真实存储位置，访问的数据不在内存时，操作系统会临时将其从外存中调入。现在主要用SSD存储元数据。虽然SSD性能比磁盘高，但是SSD仍然是外存的一种。存储阵列容量增大后，产生的元数据无法全缓存到内存中，SSD使用中涉及到内存外存来回加载的问题，会造成系统性能的明显下降。

基于上述问题，因此，对于本领域技术人员而言，如何进行海量元数据缓存加速，降低数据来回加载是亟需解决的技术问题。

发明内容

基于背景技术存在的技术问题，本发明提出了一种海量元数据缓存加速的方法，减少了SSD读取数据的操作，从而降低时延，最大限度的加速元数据的访问速度。而且如果发生故障，持久性内存系统使得内存数据在系统发生故障时依然得以保留。使得通电后可以直接读取数据，避免了再次加载数据到内存。

本发明提出的一种海量元数据缓存加速的方法，包括以下步骤：

增加非易失性内存作为扩展缓存；

将元数据区分为第一热度数据、第二热度数据和第三热度数据；

将第一热度数据存储在内存中，将第二热度数据存储在扩展缓存中，将第三热度数据存储在外存中。

优选地，扩展内存中数据按照页进行管理。

优选地，内存为RDAM。

优选地，外存为SSD。

优选地，还包括步骤：利用虚地址映射到元数据服务，使得第一热度数据或第二热度数据直接从内存或扩展缓存访问。

本发明中提供的一种海量元数据缓存加速的方法，减少了SSD读取数据的操作，从而降低时延，最大限度的加速元数据的访问速度。而且如果发生故障，持久性内存系统使得内存数据在系统发生故障时依然得以保留。使得通电后可以直接读取数据，避免了再次加载数据到内存。

附图说明

图1为本发明提出的一种海量元数据缓存加速的方法的流程图。

具体实施方式

如图1所示，图1为本发明提出的一种海量元数据缓存加速的方法的流程图。

下面结合附图和实施例对本发明进行详细的描述。

一种海量元数据缓存加速的方法，包括以下步骤：

S1：增加非易失性内存作为扩展缓存；

S2：将元数据区分为第一热度数据、第二热度数据和第三热度数据；

S3：将第一热度数据存储在内存RDAM中，将第二热度数据存储在扩展缓存中，将第三热度数据存储在外存SSD中，扩展内存中数据按照页进行管理；

S4：当元数据无法全缓存时，利用虚地址映射到元数据服务，使得第一热度数据或第二热度数据直接从内存或扩展缓存访问。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。