[发明专利]一种ElasticSearch查询加速方法

摘要

本发明公开了一种ElasticSearch查询加速方法，计算机大数据索引技术领域，分发明首先为每个字段增加Payload载荷域，然后再通过Payload载荷域在单一子查询条件的基础上做过滤操作，解决了ES原始数据查询时如果各个结果集数据量很大，取交集和并集的计算会占用大量时间的问题，提高了索引效率。

主权项

1.一种ElasticSearch查询加速方法，其特征在于：包括如下步骤：步骤1：建立全文索引系统，全文索引系统包括Hadoop存储服务器集群、WEB界面服务器、数据导入服务器和数据采集终端，数据采集终端通过互联网连接数据导入服务器，WEB界面服务器和数据导入服务器均通过互联网连接Hadoop存储服务器集群；步骤2：通过Lucene全文信息检索工具在Hadoop存储服务器集群中建立全文检索平台，并且通过Lucene全文信息检索工具在Hadoop存储服务器集群中分配出ES集群；步骤3：数据采集终端将流数据或文本数据输入到数据导入服务器，数据倒入服务器将流数据或文本数据发送给Hadoop存储服务器集群进行存储；步骤4：ES集群通过Lucene全文信息检索工具为Hadoop存储服务器集群存储的数据建立倒排文件索引结构的索引数据表，ES集群为索引数据表提供存储用的字段区；所述存储用的字段区中包含多个文档号存储字段区；步骤5：根据Lucene全文信息检索工具提供的底层存储结构，ES集群在倒排表链表中添加多个Payload载荷域，所有Payload载荷域均设于文档号存储字段区后边；步骤6：用户通过WEB界面服务器输入查询条件，WEB界面服务器将查询条件传送给ES集群；所述查询条件包括精确查询条件、范围查询条件、前缀查询条件和Payload范围查询条件；步骤7：ES集群通过Lucene全文信息检索工具首先根据精确查询条件、范围查询条件和前缀查询条件进行检索，相应得出精确查询结果、范围查询结果和前缀查询结果；步骤8：ES集群根据Payload范围查询条件分别对精确查询结果、范围查询结果和前缀查询结果进行过滤，得到精确查询结果集、范围查询结果集和前缀查询结果集；步骤9：ES集群将精确查询结果集、范围查询结果集和前缀查询结果集做交集计算，得出最终检索结果。