[发明专利]数据查询方法和装置

说明书

本发明公开了一种数据查询方法和装置，涉及计算机技术领域。其中，该方法包括：接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。通过以上步骤，能够提高数据查询效率，改善存储系统的查询性能。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据查询方法和装置。

背景技术

为了快速响应访问请求，现有的存储系统中普遍设有缓存机制。如图1所述，在现有缓存机制下，内存中设有两个内存空间，具体为内存空间L1和内存空间L2。其中，内存空间L1用于存储部分索引(Index)，内存空间L2用于存储与L1中的索引对应的数据(DataBlock)。在现有技术中，服务端在接收到数据查询请求后，先从内存空间L1中查找到相应的索引，再根据查找到的索引从内存空间L2中获取数据。如果在内存空间L2中获取不到数据，则需要在底层系统中获取数据。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：由于内存空间L2中存放的数据通常为底层系统中的文件的一部分。在现有的数据查询流程中，如果需要在底层系统中获取数据，则必须从底层系统文件的第1行开始检索，这样在查找过程中就会检索很多不必要的数据，进而拖慢了数据查询效率，降低了系统的查询性能。

发明内容

有鉴于此，本发明提供一种数据查询方法和装置，能够提高数据查询效率，改善存储系统的查询性能。

为实现上述目的，根据本发明的第一个方面，提供了一种数据查询方法。

本发明的数据查询方法包括：接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。

可选地，在所述根据所述查询请求查询第三缓存，以得到与所述查询请求对应的索引的步骤之前，还包括，将所述与其他数据块相对应的索引加载至第三缓存中。

可选地，所述方法还包括：将从文件系统中查询出的数据更新至第二缓存中，并将第三缓存中与所述查询出的数据相对应的索引移动至第一缓存。

可选地，所述方法还包括：在所述第一缓存存在与所述查询请求对应的索引的情况下，根据与所述查询请求对应的索引查询第二缓存，并将从第二缓存中查询出的数据返回至客户端。

可选地，所述方法应用于HBase服务端，所述文件系统为HDFS系统。

为实现上述目的，根据本发明的第二个方面，提供了一种数据查询装置。

本发明的数据查询装置包括：第一缓存查询模块，用于接收客户端的查询请求，根据所述查询请求查询第一缓存；所述第一缓存用于存储与第二缓存中的数据块相对应的索引；第三缓存查询模块，用于响应于确定所述第一缓存不存在与所述查询请求对应的索引，根据所述查询请求查询第三缓存，确定与所述查询请求对应的索引；所述第三缓存用于存储与其他数据块相对应的索引；所述其他数据块为同一文件中除所述第二缓存中的数据块之外的数据块；文件系统查询模块，用于根据与所述查询请求对应的索引查询文件系统，并将从文件系统中查询出的数据返回至客户端。