[发明专利]一种降低写放大的数据存储处理方法及其系统在审
申请号: | 201910048977.3 | 申请日: | 2019-01-18 |
公开(公告)号: | CN109800182A | 公开(公告)日: | 2019-05-24 |
发明(设计)人: | 毛兴中 | 申请(专利权)人: | 深圳忆联信息系统有限公司 |
主分类号: | G06F12/06 | 分类号: | G06F12/06;G06F13/42;G06F3/06 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 冯筠 |
地址: | 518067 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据存储处理 放大 压缩 原始数据量 处理策略 地址映射 固态硬盘 获取文件 使用寿命 数据文件 数据压缩 文件后缀 文件信息 压缩算法 比特位 初始化 存储体 数据量 解析 存储 查询 传输 制定 | ||
1.一种降低写放大的数据存储处理方法,其特征在于,包括以下步骤:
S1,对文件信息具体格式及处理策略进行初始化和同步;
S2,根据文件后缀,将文件分成不同的类型,并配以相应的ID号;
S3,通过PCIe接口及NVMe协议进行命令和数据的传输,并对命令中相应的比特位进行解析,获取文件类型ID;
S4,查询获取该ID所对应的压缩算法类型,并进行数据压缩;
S5,对压缩后的文件进行地址映射及其他常用处理,并写到NAND存储体中。
2.根据权利要求1所述的一种降低写放大的数据存储处理方法,其特征在于,所述S1包括:按事先约定的格式和策略进行处理或在使用过程中进行动态同步和自我策略匹配,制定文件类型ID与采用的压缩策略,并形成固定对应关系。
3.根据权利要求1所述的一种降低写放大的数据存储处理方法,其特征在于,所述S2还包括:当下发数据写命令时,将当前文件所属的文件类型ID打包到NVMe命令中。
4.根据权利要求1所述的一种降低写放大的数据存储处理方法,其特征在于,所述S5还包括:压缩后的数据进行随机数填充,以适应地址映射所需的合适的数据包大小。
5.根据权利要求1所述的一种降低写放大的数据存储处理方法,其特征在于,所述S5之后,还包括:进行读操作命令,将读命令转换成NAND识别的读操作,从NAND储体中读出数据。
6.根据权利要求5所述的一种降低写放大的数据存储处理方法,其特征在于,所述S5之后,还包括:处理读命令时,根据压缩控制信息中的压缩标志及压缩算法ID获取该ID所对应的解压算法类型,对当前数据进行解压缩处理,并传回主机端。
7.一种降低写放大的数据存储处理系统,其特征在于,包括:初始化单元,分成单元,传输解析单元,查询压缩单元,及映射处理单元;
所述初始化单元,用于对文件信息具体格式及处理策略进行初始化和同步;
所述分成单元,用于根据文件后缀,将文件分成不同的类型,并配以相应的ID号;
所述传输解析单元,用于通过PCIe接口及NVMe协议进行命令和数据的传输,并对命令中相应的比特位进行解析,获取文件类型ID;
所述查询压缩单元,用于查询获取该ID所对应的压缩算法类型,并进行数据压缩;
所述映射处理单元,用于对压缩后的文件进行地址映射及其他常用处理,并写到NAND存储体中。
8.根据权利要求7所述的一种降低写放大的数据存储处理系统,其特征在于,所述初始化单元包括:按事先约定的格式和策略进行处理或在使用过程中进行动态同步和自我策略匹配,制定文件类型ID与采用的压缩策略,并形成固定对应关系。
9.根据权利要求7所述的一种降低写放大的数据存储处理系统,其特征在于,所述分成单元还包括:当下发数据写命令时,将当前文件所属的文件类型ID打包到NVMe命令中。
10.根据权利要求7所述的一种降低写放大的数据存储处理系统,其特征在于,还包括:读操作单元和解压缩处理单元;
所述读操作单元,用于进行读操作命令,将读命令转换成NAND识别的读操作,从NAND储体中读出数据;
所述解压缩处理单元,用于处理读命令时,根据压缩控制信息中的压缩标志及压缩算法ID获取该ID所对应的解压算法类型,对当前数据进行解压缩处理,并传回主机端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳忆联信息系统有限公司,未经深圳忆联信息系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910048977.3/1.html,转载请声明来源钻瓜专利网。