[发明专利]一种分布式云存储高速缓存层实现方法

说明书

本发明涉及云存储技术领域，特别是一种分布式云存储高速缓存层实现方法。本发明首先设置和定期迁移分布式云存储内部数据，根据硬盘设备类型，划分缓存层及其等级，设置逻辑单元的迁移个数为Num，为了每个层添加存储对象，根据三个维度计算每层所有辑存储单元的权值，定期从最高层开始访问每一层(除了最底层)：把本层中权值最低的Num个逻辑存储单元集合迁移到下一层，若下一层已经是最底层，则不需要迁移并直接从本层中剔除；然后客户端从分布式云存储缓存层读数据；最后客户端从分布式云存储缓存层上写数据。本发明的方法能够保证读写都基本上在高速缓存层上发生，提高IO读写能力，提高用户的性能体验。本发明解决了云存储的响应能力；可应用于云计算的存储上。

技术领域

本发明涉及云存储技术领域，特别是一种分布式云存储高速缓存层实现方法。

背景技术

分布式云存储是通过分布式文件系统，把网络中大量类型各异的存储对象整合起来，并对外提供数据存储和业务访问服务。然而分布式文件系统中在整合的过程中面临存储设备的IO处理能力参差不齐的问题，带来以下问题：

一是分布式云存储IO处理快慢受限于IO处理能力较低的存储对象

二是购买大量类似SSD高速的硬盘来部署分布式云存储来提供IO处理能力，不但成本高昂，而且性价比很高的SATA低速IO存储设备就无用武之地

三是购买小量类似SSD高速的硬盘来部署分布式云存储来，IO处理性能不会有较大改善

为了以较少的成本投入来提高云存储的响应能力，即能提高用户操作分布式存储的响应速度，需要由一种分布式云存储高速缓存层方法，把频繁读写的数据IO请求集中在由SSD存储对象组成的高速缓存层，把用户很少用到的数据放在由性价比高的SATA存储对象组成的最底层上。

发明内容

本发明解决的技术问题在于提供一种分布式云存储高速缓存层实现方法，解决了分布式云存储IO处理快慢受限于IO处理能力较低的存储对象、以高成本购买大量类似SSD高速的硬盘才能提高分布式云存储IO处理能力等问题。

本发明解决上述技术问题的技术方案是：

所述的方法包括如下步骤：

步骤一：设置和定期迁移分布式云存储内部数据；

步骤二：客户端从分布式云存储缓存层读数据；

步骤三:客户端从分布式云存储缓存层上写数据；

所述的步骤一具体包括如下步骤：

步骤11：根据硬盘设备类型，划分缓存层及其等级；

步骤12：设置逻辑单元的迁移个数为Num；

步骤13：为了每个层添加存储对象；

步骤14：根据三个维度计算每层所有逻辑存储单元的权值；

步骤15：访问最高层开始，访问除最底层外的每一层，把本层中权值最低的Num个逻辑存储单元集合迁移到下一层，若下一层已经是最底层，则不需要迁移并直接从本层中剔除；

所述的三个维度，是指最近查询命中次数、最近查询时间和最近写入时间；

所述的步骤二具体包括如下步骤：

步骤21：客户端读数据，i＝最高层；

步骤22：查询第i层是否存在数据,若存在执行步骤23，若不存在，执行步骤24；

步骤23：读取数据并返回给客户端；

步骤24：i＝i-1，即再往下一层；

步骤25：若i是最底层，则执行步骤26，i不是最底层，则执行步骤27；