[发明专利]一种内容感知型计算机缓存管理系统及方法有效
申请号: | 201810555251.4 | 申请日: | 2018-06-01 |
公开(公告)号: | CN109002400B | 公开(公告)日: | 2023-05-05 |
发明(设计)人: | 邓玉辉;刘瑞锴 | 申请(专利权)人: | 暨南大学 |
主分类号: | G06F12/0802 | 分类号: | G06F12/0802;G06F12/0891;G06F12/0895 |
代理公司: | 广州市华学知识产权代理有限公司 44245 | 代理人: | 陈燕娴 |
地址: | 510632 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 内容 感知 计算机 缓存 管理 系统 方法 | ||
1.一种内容感知型计算机缓存管理系统,其特征在于,所述的缓存管理系统包括:元数据管理模块和数据块管理模块,其中,所述的元数据管理模块包括顺序连接的源地址映射索引单元、源地址管理单元、指纹索引单元,唯一数据块缓存地址管理单元,
所述的源地址映射索引单元,负责请求到达缓存管理系统时,利用散列表映射,快速判断在源地址管理中是否存在所请求的源地址节点;
所述的源地址管理单元,通过双向链表把数据块源地址在缓存中按LRU次序进行组织排列,链表每个节点记录了数据块地址和指纹信息,链表按照节点访问的LRU规则对节点顺序组织;
所述的指纹索引单元,对去重后唯一数据块指纹进行索引,其中去重过程为,当系统写请求数据块到达缓存系统时,对数据块计算指纹,将计算后的指纹散列至指纹索引单元中,通过比对是否存在相同指纹,判断当前写入数据块内容是否与已存储的数据块内容相同,若存在相同指纹,则只增加对指纹和数据块的索引而不进行冗余存储;
所述的唯一数据块缓存地址管理单元,对所述的源地址管理单元中存储的数据块进行索引,通过LRU算法按照数据块访问顺序对数据块进行组织记录,以便缓存需要剔除数据块时,快速发现存在在缓存中适合剔除的数据,缓存数据块经过数据去重后源地址与数据块变为多对一的映射关系,唯一数据块缓存地址管理单元的LRU队列,与源地址管理中的LRU队列保持相对一致的关系;
所述的数据块管理模块,负责数据块的统一存储;
基于所述内容感知型计算机缓存管理系统的缓存管理方法包括:读请求步骤和写请求步骤,其中,
所述的读请求步骤过程如下:
S1、缓存管理系统收到上层系统请求读写请求,判断请求源地址在源地址映射索引单元中是否命中,若源地址命中,转至步骤S2,若源地址未命中,转至步骤S5;
S2、若源地址命中,将源地址管理链表节点中存储的指纹映射至指纹索引单元中,判断指纹是否命中;
S3、若指纹索引命中,通过指纹索引单元中节点获取请求数据块存储位置,若指纹索引不命中,从下层设备中将请求数据块读入缓存中;
S4、从下层存储设备中读取数据块时,需要判断当前缓存空间是否已满,若当前缓存管理系统已满,需要剔除部分数据块,以腾出存储空间存储新的数据块,具体执行如下:选取唯一数据块缓存地址管理单元中链表尾部节点,该节点指向最久未访问数据块,删除该节点和对应数据块,将指纹索引单元中指向该节点的指针置为空;
S5、若读请求到达缓存系统,请求源地址在源地址映射索引未命中,即缓存中未存储请求数据块,此时需要将数据块从下层存储设备中读入缓存,对数据块存储前,首先计算该数据块指纹,并映射至指纹索引单元中,若指纹命中且对应数据块存储在缓存中,则增加对应数据块指纹索引计数,同时在源地址管理链表首部增加新的节点,记录请求源地址和指纹信息,并将唯一数据块缓存地址管理单元的链表中指向与请求数据块内容相同数据块地址的节点移动至链表首部MRU位置;
所述的写请求步骤过程如下:
R1、写请求到达缓存管理系统时,首先计算写入数据块指纹,然后判断当前写入数据块源地址是否已缓存;
R2、若源地址已缓存,判断指纹是否相同,则认为缓存中已存在与当前写入数据块内容完全相同的数据块,则不需要进行写操作,将源地址管理单元的链表和唯一数据块缓存地址管理单元的链表中对应节点分别移动至所在链表的首部MRU位置;
R3、若当前写入数据块源地址已缓存,但新写入的数据块指纹与旧指纹不同或当前写入数据块源地址未缓存,则需要判断与当前写入的新数据块内容相同的数据块是否已在缓存中存储,若已存储,则减少旧数据块的指纹索引,增加与当前写入的新数据块内容相同的数据块的指纹索引计数,并更新源地址管理链表和唯一数据块缓存地址管理单元的链表中节点信息;
R4、当请求写入数据块源地址在缓存中命中,但对应数据块以从缓存中被剔除,此时与请求未命中从下层存储设备中读入数据块操作相同。
2.根据权利要求1所述的一种内容感知型计算机缓存管理系统,其特征在于,所述的源地址映射索引单元中数据组织形式如下:
以散列表的形式组织源地址到源地址管理链表的映射关系,上层读写请求到达缓存管理系统后,以O(1)的时间复杂度判断请求数据的源地址是否存在于源地址管理链表中,从而判断缓存是否命中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于暨南大学,未经暨南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810555251.4/1.html,转载请声明来源钻瓜专利网。
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法