[发明专利]数据处理方法、装置、电子设备及可读存储介质

说明书

本申请提供一种数据处理方法、装置、电子设备及可读存储介质，该方法包括：当接收到数据写入请求时，根据待写入数据的大小和写入偏移量确定当前数据写入的第一起始偏移量和第一结束偏移量；当所述第一起始偏移量不是page的起始位置时，将所述第一起始偏移量所在page的起始位置确定为当前数据写入的实际起始偏移量；将所述第一起始偏移量所在page中的数据和待写入数据合并成整数个page的大小进行写入；当所述第一结束偏移量不是page的结束位置时，将所述第一结束偏移量所在page的结束位置确定为实际结束偏移量，并将剩余的待写入数据填充至一个page的大小写入该page。该方法可以提高数据写入效率，并减少写惩罚。

技术领域

本申请涉及数据存储技术，尤其涉及一种数据处理方法、装置、电子设备及可读存储介质。

背景技术

文件系统是操作系统用于明确存储节点上的文件的方法和数据结构，即在存储节点上组织文件的方法。

SSD(Solid State Drives，固态硬盘)是使用固态电子存储芯片阵列制成的硬盘，采用NAND(与非)FLASH(闪存)作为存储介质。

SSD进行数据读写的最小单位是页(page)，进行擦除的最小单位是块(block)，一个块可以包括多个页。

随着SSD的应用和普及，基于SSD实现的文件系统成为一个热门研究方向，但是由于传统文件系统无法适配SSD的page大小，无法按照page大小进行数据读写，导致数据写入过程中存在较多的读写惩罚，且数据读写效率较差。

发明内容

有鉴于此，本申请提供一种数据处理方法、装置、电子设备及可读存储介质。

具体地，本申请是通过如下技术方案实现的：

根据本申请实施例的第一方面，提供一种数据处理方法，应用于存储节点，所述存储节点运行有基于SSD实现的文件系统，所述文件系统中包括启动块、索引块和数据块，所述启动块的大小为block的大小的整数倍，所述索引块的大小为page的整数倍，且所述索引块在SSD中的逻辑地址是连续的，所述索引块组成的索引块区的大小为block的大小的整数倍，所述数据块的大小为block的整数倍，所述索引块与所述数据块一一对应，该方法包括：

当接收到数据写入请求时，根据待写入数据的大小和写入偏移量确定当前数据写入的第一起始偏移量和第一结束偏移量；

当所述第一起始偏移量不是page的起始位置时，将所述第一起始偏移量所在page的起始位置确定为当前数据写入的实际起始偏移量；

将所述第一起始偏移量所在page中的数据和待写入数据合并成整数个page的大小进行写入；

当所述第一结束偏移量不是page的结束位置时，将所述第一结束偏移量所在page的结束位置确定为实际结束偏移量，并将剩余的待写入数据填充至一个page的大小写入该page。

可选的，所述将所述第一起始偏移量所在page中的数据和待写入数据合并成整数个page的大小进行写入之前，还包括：

若当前数据写入为首次写入，则将所述起始偏移量所在page中的数据读入写缓存；

所述将剩余的待写入数据填充至一个page大小写入该page之后，还包括：

在写缓存中保存至少最后一个page中的数据。

可选的，所述方法还包括：

当接收到数据读取请求时，判断待读取数据的读取偏移量是否在读缓存内；

当所述读取偏移量不在读缓存内时，根据待读取数据的大小和读取偏移量确定当前数据读取的第二起始偏移量和第二结束偏移量；