[发明专利]小文件冷热数据分层方法、小文件数据访问方法及其装置在审
申请号: | 201810989587.1 | 申请日: | 2018-08-28 |
公开(公告)号: | CN109240611A | 公开(公告)日: | 2019-01-18 |
发明(设计)人: | 邸忠辉 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热数据 预设 内存盘 目标数据 系统内存 小文件 磁盘 数据访问 数据分层 冷热 复制 存储技术领域 存储设备 访问成功 获取目标 判别条件 响应能力 直接访问 冷数据 访问 查找 节约 | ||
本发明公开了一种小文件冷热数据分层方法、小文件数据访问方法及其装置、设备,涉及存储技术领域,包括:通过获取目标数据,将所述目标数据存放至预设磁盘中;利用预设判别条件判断所述目标数据是否为热数据或冷数据;若所述目标数据为热数据,则将所述热数据复制至系统内存的预设ramdisk内存盘中。也即,本发明先将目标数据存放至性能较低的预设磁盘内,将系统内存中的一部分作为ramdisk内存盘,将访问频繁的热数据从预设磁盘复制至所述ramdisk内存盘,由此,在访问热数据时将直接访问系统内存中的ramdisk内存盘即可访问成功,无需查找预设磁盘,具备较高的性能和较快的响应能力;另外,直接将系统内存的一部分作为ramdisk内存盘来存放热数据,有效节约了存储设备的成本。
技术领域
本发明涉及存储技术领域,特别涉及一种小文件冷热数据分层方法、小文件数据访问方法及其装置、设备。
背景技术
随着存储技术的不断进步,固态硬盘技术得到了不断地发展和应用。固态硬盘相比较于传统的机械硬盘,由于没有磁盘的机械转动,读写性能大大提高,由此在存储技术中开始利用固态硬盘存放热数据。但是由于固态硬盘的单位存储价格远高于传统的磁带和SATA硬盘,且固态硬盘有擦写次数限制。如果将热数据存储至固态硬盘,频繁擦写同一块固态硬盘,则加快了固态硬盘的损坏速度。
对于大文件的存储,可以采用在系统中加入缓存层从而实现对数据进行预读和回写的方式,减少磁盘操作,进一步提高读写性能。但对于小文件来说,加入缓存层并不能明显的改善小文件的读写性能,某些场景下甚至还会降低读写性能。
综上所述可以看出,如何在保证合理存储设备成本的基础上,进一步提升小文件的读写性能是目前需要解决的问题。
发明内容
有鉴于此,本发明的目的在于提供一种小文件冷热数据分层方法、小文件数据访问方法及其装置、设备,能够具备较高性能和较快响应能力,并可以有效节约成本。其具体方案如下:
第一方面,本发明公开了一种小文件冷热数据分层方法,包括:
获取目标数据,将所述目标数据存放至预设磁盘中;
利用预设判别条件判断所述目标数据是否为热数据或冷数据;
若所述目标数据为热数据,则将所述热数据复制至系统内存的预设ramdisk内存盘中。
可选的,所述利用预设判别条件判断所述目标数据是否为热数据或冷数据,包括:
利用所述目标数据的访问频率与第一预设频率阈值的比较结果,判断所述目标数据是否为热数据或冷数据。
可选的,所述利用预设判别条件判断所述目标数据是否为热数据或冷数据,包括:
利用时间间隔与预设时间阈值的比较结果,判断所述目标数据是否为热数据或冷数据;其中,所述时间间隔为所述目标数据上次访问时间与当前时间之间的时间间隔。
可选的,所述利用预设判别条件判断所述目标数据是否为热数据或冷数据,包括:
利用所述目标数据的访问频率与时间间隔,确定所述目标数据的热度值;其中,所述时间间隔为所述目标数据上次访问时间与当前时间之间的时间间隔;
利用所述热度值与预设热度值的比较结果,判断所述目标数据是否为热数据或冷数据。
可选的,还包括:
定期将所述预设ramdisk内存盘中修改过的数据回写至所述预设磁盘中。
可选的,还包括:
定期将所述预设ramdisk内存盘中满足预设筛选条件的第一数据删除。
可选的,所述定期将所述预设ramdisk内存盘中满足预设筛选条件的第一数据删除,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810989587.1/2.html,转载请声明来源钻瓜专利网。