[发明专利]搜索方法和搜索引擎

说明书

本发明提供一种搜索方法和搜索引擎，通过接收用户终端发送的用于对网页进行搜索的关键字，利用各从节点的内存中存储的第一索引文件，进行搜索，获得与关键字相匹配的第一匹配网页后，若第一匹配网页的个数少于第一阈值，再利用各节点的磁盘中所存储的第二索引文件，进行搜索，获得与所述关键字相匹配的第二匹配网页，向用户终端发送包含第一匹配网页和第二匹配网页的搜索结果，由于首先利用内存中存储的第一索引文件进行搜索，不需要占用I/O接口，从而避免了由于全部将索引文件存储在磁盘所导致的检索速度下降，提高了检索效率。

技术领域

本发明涉及信息检索技术，尤其涉及一种搜索方法和搜索引擎。

背景技术

搜索引擎是一种根据用户终端输入的关键字，利用倒排索引文件，也称索引文件，进行检索的系统。搜索引擎可分为全文搜索引擎、垂直搜索引擎、集合式搜索引擎和门户搜索引擎等不同种类。搜索引擎需要预先根据包括数十亿，甚至百亿数量级网页的原始网络数据创建索引文件，获得的索引文件的数据量也较大，以全文搜索引擎为例，约为10²G到10³G数量级。

现有技术中，通常采用将索引文件存储在磁盘上，当利用文件进行搜索时，需要频繁占用磁盘的输入/输出（I/O）接口，因而导致检索速度下降，效率较低。

发明内容

本发明提供一种搜索方法和搜索引擎，用于提高检索速度和效率。

本发明的第一个方面是提供一种搜索方法，包括：

接收用户终端发送的用于对网页进行搜索的关键字；

利用各从节点的内存中存储的第一索引文件，进行搜索，获得与所述关键字相匹配的第一匹配网页；

若所述第一匹配网页的个数少于第一阈值，利用所述各节点的磁盘中所存储的第二索引文件，进行搜索，获得与所述关键字相匹配的第二匹配网页；所述第二索引文件是以第一时长为周期对所述各从节点的内存中所存储的所述第一索引文件周期性持久化到磁盘中获得的；

向所述用户终端发送搜索结果；所述搜索结果包括所述第一匹配网页和/或所述第二匹配网页。

本发明的另一个方面是提供一种搜索引擎，包括：

接收模块，用于接收用户终端发送的用于对网页进行搜索的关键字；

第一搜索模块，用于利用各从节点的内存中存储的第一索引文件，进行搜索，获得与所述关键字相匹配的第一匹配网页；

第二搜索模块，用于若所述第一匹配网页的个数少于第一阈值，利用所述各节点的磁盘中所存储的第二索引文件，进行搜索，获得与所述关键字相匹配的第二匹配网页；所述第二索引文件是以第一时长为周期对所述各从节点的内存中所存储的所述第一索引文件，周期性持久化到磁盘中获得的；

发送模块，用于向所述用户终端发送搜索结果；所述搜索结果包括所述第一匹配网页和/或所述第二匹配网页。

本发明提供的搜索方法和搜索引擎，通过接收用户终端发送的用于对网页进行搜索的关键字，利用各从节点的内存中存储的第一索引文件，进行搜索，获得与关键字相匹配的第一匹配网页后，若第一匹配网页的个数少于第一阈值，再利用各节点的磁盘中所存储的第二索引文件，进行搜索，获得与所述关键字相匹配的第二匹配网页，向用户终端发送包含第一匹配网页和第二匹配网页的搜索结果，由于首先利用内存中存储的第一索引文件进行搜索，不需要占用I/O接口，从而避免了由于全部将索引文件存储在磁盘所导致的检索速度下降，提高了检索效率。

附图说明

图1为本发明一实施例提供的搜索方法的流程示意图；

图2为本发明另一实施例提供的搜索方法的流程示意图；

图3为本发明一实施例提供的搜索引擎的结构示意图；