[发明专利]索引重建方法、装置、设备、计算机可读存储介质及产品

说明书

本公开提供一种索引重建方法、装置、设备、计算机可读存储介质及产品，该方法包括：获取索引重建配置信息，索引重建配置信息中包括原索引以及与原索引对应的待重建索引；根据索引重建配置信息，从预设的分布式数据仓库中获取与原索引对应的离线数据并写入到待重建索引对应的数据存放区域中；通过预设的脚本程序获取变更在线数据，将变更在线数据分别写入原索引对应的数据存放区域以及待重建索引对应的数据存放区域中，获得更新后的原索引以及更新后的待重建索引；根据更新后的原索引以及更新后的待重建索引之间的误差，确定重建后的目标索引。从而能够有效地提高索引重建速度，提高用户体验。

技术领域

本公开实施例涉及计算机与数据库技术领域，尤其涉及一种索引重建方法、装置、设备、计算机可读存储介质及产品。

背景技术

Elasticsearch(简称ES)是一个分布式、可扩展、实时的搜索与数据分析引擎。索引提供指向存储在表的指定列中的数据值的指针，数据库使用索引以找到特定值，然后顺指针找到包含该值的行。其可以应用在任意一种聚合了多种不同第三方数据的搜索业务场景中。一方面，随着业务的迭代发展，不断有新的字段加入ES中，另一方面，搜索业务需要不断的优化分词算法等并将其快速迭代应用到ES中，这些情况下就需要对ES索引数据和字段进行重建。

为了实现对ES索引的重建操作，现有技术中一般都是设置一个脚本程序，通过该脚本程序定时扫描数据库新增数据更新到ES。当遇到索引字段变更或者分词全部变更时，通常需要启动单独的脚本去遍历数据库，更新完所有数据。

但是，采用上述方法进行索引重建时，采用脚本程序进行离线数据的变更往往需要较长的时间。而由于索引重建的时间较长，用户在采用该索引进行线上搜索时，可能会同时命中新旧索引，导致搜索效果不佳。

发明内容

本公开实施例提供一种索引重建方法、装置、设备、计算机可读存储介质及产品，用于解决现有的索引重建方法所需时间较长导致无法正常使用索引的问题。

第一方面，本公开实施例提供一种索引重建方法，包括：

获取索引重建配置信息，所述索引重建配置信息中包括原索引以及与所述原索引对应的待重建索引；

根据所述索引重建配置信息，从预设的分布式数据仓库中获取与原索引对应的离线数据并写入到待重建索引对应的数据存放区域中；

通过预设的脚本程序获取变更在线数据，将所述变更在线数据分别写入所述原索引对应的数据存放区域以及所述待重建索引对应的数据存放区域中，获得更新后的原索引以及更新后的待重建索引；

根据所述更新后的原索引以及更新后的待重建索引之间的误差，确定重建后的目标索引。

第二方面，本公开实施例提供一种索引重建装置，包括：

获取模块，用于获取索引重建配置信息，所述索引重建配置信息中包括原索引以及与所述原索引对应的待重建索引；

处理模块，用于根据所述索引重建配置信息，从预设的分布式数据仓库中获取与原索引对应的离线数据并写入到待重建索引对应的数据存放区域中；

处理模块，还用于通过预设的脚本程序获取变更在线数据，将所述变更在线数据分别写入所述原索引对应的数据存放区域以及所述待重建索引对应的数据存放区域中，获得更新后的原索引以及更新后的待重建索引；

确定模块，用于根据所述更新后的原索引以及更新后的待重建索引之间的误差，确定重建后的目标索引。

第三方面，本公开实施例提供一种电子设备，包括：至少一个处理器和存储器；

所述存储器存储计算机执行指令；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如上第一方面以及第一方面各种可能的设计所述的索引重建方法。