[发明专利]一种降低写放大的数据存储处理方法及其系统

说明书

本发明涉及一种降低写放大的数据存储处理方法及其系统；其中，处理方法，包括以下步骤：S1，对文件信息具体格式及处理策略进行初始化和同步；S2，根据文件后缀，将文件分成不同的类型，并配以相应的ID号；S3，通过PCIe接口及NVMe协议进行命令和数据的传输，并对命令中相应的比特位进行解析，获取文件类型ID；S4，查询获取该ID所对应的压缩算法类型，并进行数据压缩；S5，对压缩后的文件进行地址映射及其他常用处理，并写到NAND存储体中。本发明根据不同类型的数据文件，制定相应的压缩策略，得到最佳的压缩效果，使得存储到Flash中的数据量比原始数据量小，降低写放大；从而扩大Flash存储的利用率，提高了固态硬盘的使用寿命。

技术领域

本发明涉及固态硬盘存储设计技术领域，更具体地说是指一种降低写放大的数据存储处理方法及其系统。

背景技术

现有固态硬盘中，可以对输入的数据进行压缩，之后再存入NAND Flash存储体；但由于同一种格式文件使用不同压缩算法时的压缩度不同；有些格式的文件可以有效压缩，而有些格式的文件是没法压缩的；例如：Word、TXT、Excel等格式文件，压缩率比较高；但mp3格式音频文件、JPG/H264等格式的视频文件却几乎无法被压缩；如果不加区分的对数据进行压缩处理，则对于那些无法压缩或很难压缩文件的数据处理，就会造成时间上的浪费、同时也会增加功耗，因此无法满足需求。

发明内容

本发明的目的在于克服现有技术的缺陷，提供一种降低写放大的数据存储处理方法及其系统。

为实现上述目的，本发明采用于下技术方案：

一种降低写放大的数据存储处理方法，包括以下步骤：

S1，对文件信息具体格式及处理策略进行初始化和同步；

S2，根据文件后缀，将文件分成不同的类型，并配以相应的ID号；

S3，通过PCIe接口及NVMe协议进行命令和数据的传输，并对命令中相应的比特位进行解析，获取文件类型ID；

S4，查询获取该ID所对应的压缩算法类型，并进行数据压缩；

S5，对压缩后的文件进行地址映射及其他常用处理，并写到NAND存储体中。

其进一步技术方案为：所述S1包括：按事先约定的格式和策略进行处理或在使用过程中进行动态同步和自我策略匹配，制定文件类型ID与采用的压缩策略，并形成固定对应关系。

其进一步技术方案为：所述S2还包括:当下发数据写命令时，将当前文件所属的文件类型ID打包到NVMe命令中。

其进一步技术方案为：所述S5还包括:压缩后的数据进行随机数填充，以适应地址映射所需的合适的数据包大小。

其进一步技术方案为：所述S5之后，还包括：进行读操作命令，将读命令转换成NAND识别的读操作，从NAND储体中读出数据。

其进一步技术方案为：所述S5之后，还包括：处理读命令时，根据压缩控制信息中的压缩标志及压缩算法ID获取该ID所对应的解压算法类型，对当前数据进行解压缩处理，并传回主机端。

一种降低写放大的数据存储处理系统，包括：初始化单元，分成单元，传输解析单元，查询压缩单元，及映射处理单元；

所述初始化单元，用于对文件信息具体格式及处理策略进行初始化和同步；

所述分成单元，用于根据文件后缀，将文件分成不同的类型，并配以相应的ID号；

所述传输解析单元，用于通过PCIe接口及NVMe协议进行命令和数据的传输，并对命令中相应的比特位进行解析，获取文件类型ID；

所述查询压缩单元，用于查询获取该ID所对应的压缩算法类型，并进行数据压缩；