[发明专利]海量数据信息索引系统和索引构建方法

权利要求书

1.一种海量数据信息索引系统，其特征在于：包括，

数据分发服务器机群，包括多台数据分发服务器，用于将需要创建的数据拆分并分发；

创建数据索引服务器机群，包括多台创建数据索引服务器，各所述创建数据索引服务器分别接收所述数据分发服务器分发的数据并为所述数据创建索引；

检索服务器机群，包括多台检索服务器，接收所述创建数据索引服务器创建的所述索引并根据检索条件对数据索引进行检索；

合并检索结果服务器机群，包括多台合并检索结果服务器，接收并合并所述检索服务器检出的结果。

2.根据权利要求1所述的一种海量数据信息索引系统，其特征在于：每个所述检索服务器均包括一个备份区，用于备份该检索服务器检索出的数据。

3.根据权利要求1所述的一种海量数据信息索引系统，其特征在于：还包括备份数据服务器机群，包括多台备份数据服务器，接收并备份所述数据分发服务器、所述创建数据索引服务器、所述检索服务器和所述合并检索结果服务器上的数据。

4.根据权利要求1-3任一所述的一种海量数据信息索引系统，其特征在于：所述创建数据索引服务器创建的索引类型为倒排索引。

5.根据权利要求1-4任一所述的一种海量数据信息索引系统，其特征在于：所述数据分发服务器存储有一个实现数据分发功能的分发文件，所述分发文件记录有所有创建数据索引服务器、检索服务器和合并检索结果服务器的位置和信息。

6.根据权利要求5所述的一种海量数据信息索引系统，其特征在于：所述分发文件为XML文件。

7.一种如权利要求1-6任一所述海量数据信息索引的构建方法，其特征在于，包括如下步骤：

①将检索用服务器按照功能划分为数据分发服务器、创建数据索引服务器、用于检索服务器和用于合并检索结果服务器，按照检索的功能的计算量配备完成每一个功能的服务器数量；

②将需要建立索引的数据以文件的形式放置在数据分发服务器上；

运行建立索引脚本，按照创建数据索引服务器的数量将文件拆分，并分发到各个创建数据索引服务器；

③创建数据索引服务器接收文件，并为该文件建立索引，并和之前建立过的索引进行合并，最后将新建的索引传输到检索服务器上；

④检索条件发送到合并检索结果服务器；

⑤检索结果服务器将检索条件发送到所有检索服务器上；

⑥检索服务器接收检索条件并对已建立的索引进行检索，将检索结果返回给合并检索结果服务器；

⑦合并检索结果服务器接收到所有检索结果数据后进行数据合并，并将合并后的检索结果返回给检索用户。

8.根据权利要求7所述的海量数据信息索引构建方法，其特征在于：所述步骤中还包括备份各个步骤中产生的数据的步骤。

9.根据权利要求7或8所述的海量数据信息索引构建方法，其特征在于:所述步骤③中创建的索引为倒排索引。

10.根据权利要求7-9任一所述的海量数据信息索引构建方法，其特征在于:所述步骤①中通过在数据分发服务器上存储有一个记录数据分发服务器、创建数据索引服务器、检索服务器和合并检索结果服务器位置信息的分发文件，实现各服务器功能的划分。

11.根据权利要求10所述的海量数据信息索引构建方法，其特征在于:分发文件为XML文件,执行过程中，XML文件通过解析，将各个功能的信息通过SSH技术分发到XML文件上指定的服务器上。

12.根据权利要求7-11任一所述的海量数据信息索引构建方法，其特征在于:所述各步骤之间通过http协议实现传输。