[发明专利]一种文件存储方法、装置、设备及计算机可读存储介质在审
申请号: | 202110729568.7 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113608679A | 公开(公告)日: | 2021-11-05 |
发明(设计)人: | 孙业宽;孟祥瑞 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 侯珊 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 存储 方法 装置 设备 计算机 可读 介质 | ||
本发明公开了一种文件存储方法,该方法包括以下步骤:接收待写入的目标数据文件;判断目标数据文件是否符合固态硬盘与物理硬盘分块存储原则;若是,则从目标数据文件中选取首部数据块;将首部数据块存储至固态硬盘,并将目标数据文件除首部数据块之外的剩余数据存储至物理硬盘。应用本发明所提供的文件存储方法,避免了大文件写固态硬盘导致高性能介质的浪费,使得小文件能真正使用固态硬盘实现加速,提升了存储系统的性能。本发明还公开了一种文件存储装置、设备及存储介质,具有相应技术效果。
技术领域
本发明涉及存储技术领域,特别是涉及一种文件存储方法、装置、设备及计算机可读存储介质。
背景技术
在现网环境中,为了提升存储系统小文件性能同时兼顾成本,一般会配置一个小容量的固态硬盘(Solid State Disk,SSD)数据池作为高级池,同时提供一个大容量的物理硬盘(Hard Disk Drive,HDD)数据池作为慢速池。数据首先写入SSD池,文件在SSD池超过一定时间后,将SSD池中的超时数据迁移至HDD池,空出SSD池继续接收新的写入业务。
SSD池空间因成本高所以一般容量有限,在小文件业务场景能存储大量的小文件,但当存在大文件的场景时,SSD池存储不了多少大文件就会被写满,而且大文件存储在SSD池并不会提升多少性能。另外文件在创建时也无法预测是大文件还是小文件,不同大小的文件都首先写入SSD池,高成本存储介质SSD被大文件快速写满,造成小文件无法使用SSD实现加速,从而导致SSD高性能存储介质的浪费,影响存储系统性能。
综上所述,如何有效地解决现有的文件存储方法易造成小文件无法使用SSD实现加速,从而导致SSD高性能存储介质的浪费,影响存储系统性能等问题,是目前本领域技术人员急需解决的问题。
发明内容
本发明的目的是提供一种文件存储方法,该方法避免了大文件写固态硬盘导致高性能介质的浪费,使得小文件能真正使用固态硬盘实现加速,提升了存储系统的性能;本发明的另一目的是提供一种文件存储装置、设备及计算机可读存储介质。
为解决上述技术问题,本发明提供如下技术方案:
一种文件存储方法,包括:
接收待写入的目标数据文件;
判断所述目标数据文件是否符合固态硬盘与物理硬盘分块存储原则;
若是,则从所述目标数据文件中选取首部数据块;
将所述首部数据块存储至所述固态硬盘,并将所述目标数据文件除所述首部数据块之外的剩余数据存储至所述物理硬盘。
在本发明的一种具体实施方式中,判断所述目标数据文件是否符合固态硬盘与物理硬盘分块存储原则,包括:
判断是否存在所述目标数据文件创建时匹配分层策略设置的物理硬盘设置标识信息。
在本发明的一种具体实施方式中,当确定所述目标数据文件不符合固态硬盘与物理硬盘分块存储原则时,还包括:
将所述目标数据文件存储至所述固态硬盘。
在本发明的一种具体实施方式中,从所述目标数据文件中选取首部数据块,包括:
根据条带化预置的首部数据块文件大小从所述目标数据文件中选取所述首部数据块;
将所述目标数据文件除所述首部数据块之外的剩余数据存储至所述物理硬盘,包括:
根据所述首部数据块文件大小计算文件偏移量;
根据所述文件偏移量将所述目标数据文件除所述首部数据块之外的剩余数据存储至所述物理硬盘。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110729568.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:流量调度方法、装置及电子设备
- 下一篇:一种海量数据分布式采集方法及系统