[发明专利]一种分布式文件系统的逆序读方法、系统及相关装置

说明书

本申请提供一种分布式文件系统的逆序读方法，具体技术方案如下包括：接收逆序读请求；将上一次预读的开始位置作为触发位，设置预读偏移量进行4M对齐；根据对齐的预设偏移量计算预读文件大小，并根据所述预读文件大小重新计算预读偏移量，并确定预读开始位置和预读长度；根据所述预读开始位置和所述预读长度异步获取数据，并将数据加载到缓存。本申请能快速获取数据，提高带宽与并发量。通过实现逆序预读能够进一步实现逆序读的异步读取，有效提高CPU的使用效率，进一步提高读带宽与并发量。本申请还提供一种分布式文件系统的逆序读系统、计算机可读存储介质和电子设备，具有上述有益效果。

技术领域

本申请涉及存储领域，特别涉及一种分布式文件系统的逆序读方法、系统及相关装置。

背景技术

目前逆序读业内都以iozone工具中的倒序读标准为参考。逆序读以文件读的块大小为粒度，从文件末尾的数据块开始读，逐块向前读，即先读末尾数据块，再读倒数第二个数据块，直至文件的第一个数据块。但是在块内的数据读取是按照顺序读的方式进行。

目前使用逆序读模式的领域较少，没有进行预读模式的开发，逆序读带宽很低，读取模式普遍是同步读，并发量低，效率低。

发明内容

本申请的目的是提供一种分布式文件系统的逆序读方法、逆序读系统、计算机可读存储介质和电子设备，通过逆序预读可以实现逆序读的异步读取，有效提高CPU的使用效率，进一步提高读带宽与并发量。

为解决上述技术问题，本申请提供一种分布式文件系统的逆序读方法，具体技术方案如下：

接收逆序读请求；

将上一次预读的开始位置作为触发位，设置预读偏移量进行4M对齐；

根据对齐的预设偏移量计算预读文件大小，并根据所述预读文件大小重新计算预读偏移量，并确定预读开始位置和预读长度；

根据所述预读开始位置和所述预读长度异步获取数据，并将数据加载到缓存。

可选的，接收逆序读请求之前，还包括：

获取目标文件大小和每次读取块大小；

判断本次读偏移量是否等于所述目标文件大小和所述每次读取块大小的差值；

若是，且上一次读开始位置的偏移量为零，初始化偏移量，并生成所述逆序读请求。

可选的，初始化偏移量包括：

初始化上一次读开始位置的偏移量为所述目标文件大小；

初始化上一次读结束位置的偏移量为所述目标文件大小；

初始化触发位为读偏移量；

初始化预读位为所述读偏移量。

可选的，根据所述预读开始位置和所述预读长度异步获取数据，并将数据加载到缓存之前，还包括：

判断是否为第一次预读；

若是，将每次读取块大小设为所述预读长度，将目标文件大小设为预读位；

根据所述预读位和所述预读长度之差计算预读开始位置；对所述预读开始位置进行4M对齐，并调整所述预读开始位置和所述预读长度；

根据所述预读开始位置和所述预读长度计算预读出发位偏移，并将预读开始位置设为预读位开始预读。

可选的，若非第一次预读，还包括：

以预设倍数放大所述预设长度；

根据所述预读位和所述预读长度之差计算预读开始位置；

对所述预读开始位置进行4M对齐，并调整所述预读长度；