[发明专利]一种文件读写业务的处理方法、系统、设备以及介质

说明书

本发明公开了一种文件读写业务的处理方法，包括以下步骤：响应于接收到文件的读写业务，根据文件序号判断索引容器中是否存在文件的缓存句柄；响应于索引容器中不存在文件的缓存句柄，根据读写业务打开文件的相应句柄；将相应句柄的标志和指针以及文件序号进行封装以得到文件的缓存句柄；将文件的缓存句柄加入到索引容器和第一队列中；利用文件的相应句柄对读写业务进行处理；响应于读写业务处理完成，将文件的缓存句柄从第一队列移动到第二队列中。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明的实施例提出的方案有效降低分布式文件系统读写时文件句柄处理压力与频度。

技术领域

本发明涉及存储领域，具体涉及一种文件读写业务的处理方法、系统、设备以及存储介质。

背景技术

对于分布式文件系统（对象存储），HDFS协议访问时，由于是无状态访问（客户端不会像标准posix协议一样向存储端发送open、close请求），分布式文件系统在每次接收读写请求时需要打开文件句柄，实现读写业务，完成后再关闭文件句柄，这样造成大量的打开关闭文件句柄请求，对系统造成大量的负载，同时增大了每次读写IO的时延。

发明内容

有鉴于此，为了克服上述问题的至少一个方面，本发明实施例提出一种文件读写业务的处理方法，包括以下步骤：

响应于接收到文件的读写业务，根据文件序号判断索引容器中是否存在所述文件的缓存句柄；

响应于所述索引容器中不存在所述文件的缓存句柄，根据所述读写业务打开所述文件的相应句柄；

将所述相应句柄的标志和指针以及所述文件序号进行封装以得到所述文件的缓存句柄；

将所述文件的缓存句柄加入到所述索引容器和第一队列中；

利用所述文件的相应句柄对所述读写业务进行处理；

响应于所述读写业务处理完成，将所述文件的缓存句柄从所述第一队列移动到第二队列中。

在一些实施例中，还包括：

对所述第二队列中的每一个缓存句柄的使用时间进行检测以判断使用时间是否超过阈值；

响应于存在使用时间超过阈值的缓存句柄，将使用时间超过阈值的缓存句柄从所述第二队列中删除；

根据使用时间超过阈值的缓存句柄中的文件序号将所述索引容器中相应的缓存句柄删除，并根据句柄指针将对应的句柄关闭。

在一些实施例中，还包括：

响应于所述第二队列中的缓存句柄的数量达到预设数量，从所述第二队列的尾部开始删除若干个缓存句柄；

分别根据若干个缓存句柄中的文件序号将所述索引容器中相应的缓存句柄删除，并根据句柄指针将对应的句柄关闭。

在一些实施例中，还包括：

响应于所述索引容器中存在所述文件的缓存句柄，判断所述文件的缓存句柄中的句柄标志是否与所述读写业务对应；

响应于所述文件的缓存句柄中的句柄标志与所述读写业务对应且所述文件的缓存句柄在所述第二队列中，将所述第二队列中的缓存句柄移动到所述第一队列中，并利用已经打开的所述文件的相应句柄对所述读写业务进行处理。

在一些实施例中，还包括：

响应于所述文件的缓存句柄中的句柄标志与所述读写业务对应且所述文件的缓存句柄在所述第一队列中，利用已经打开的所述文件的相应句柄对所述读写业务进行处理，并更新所述文件的缓存句柄的使用计数。

在一些实施例中，将所述文件的缓存句柄从所述第一队列移动到第二队列中，进一步包括：

判断所述文件的缓存句柄的使用计数是否达到预设值；