[发明专利]基于Elasticsearch的数据处理方法及设备

权利要求书

1.一种基于Elasticsearch的数据处理方法，其特征在于，所述方法包括：

数据采集：通过元数据管理单元将Hive元数据导入数据库，在导入的过程中通过Elasticsearch将结构化的所述Hive元数据转换为JSON格式及创建原始索引、索引类型及文档，所述Hive元数据是根据医疗数据得到的数据；

数据处理：通过数据处理单元对所述Elasticsearch的检索数据进行热度统计，得到热度统计结果，根据所述热度统计结果对所述检索数据进行排序，得到排序结果，根据所述排序结果，确定热度标签；

索引构建：通过所述Elasticsearch根据所述热度标签，对所述数据库中的数据建立倒排索引；

数据检索：通过检索服务单元接收待检索关键词，通过所述Elasticsearch根据所述待检索关键词进行检索，得到初级检索结果，通过所述检索服务单元对所述初级检索结果进行动态调整，确定目标检索结果。

2.根据权利要求1所述的基于Elasticsearch的数据处理方法，其特征在于，所述在导入的过程中通过Elasticsearch将结构化的所述Hive元数据转换为JSON格式的步骤，包括：

通过元数据管理单元的数据导入功能，将所述Hive元数据导入数据库，在导入的过程中通过所述Elasticsearch的SDK中的XContentBuilder将所述数据库的结构化数据转换为JSON格式。

3.根据权利要求1所述的基于Elasticsearch的数据处理方法，其特征在于，所述通过数据处理单元对所述Elasticsearch的检索数据进行热度统计，得到热度统计结果的步骤，包括：

通过数据处理单元将所述Elasticsearch的所述检索数据转换为DML语言，得到DML语言数据，将所述DML语言数据存储在所述数据处理单元中；

通过数据处理单元根据所述DML语言数据，确定与被检索数据对应的提交申请总次数及查看详情总次数；

通过数据处理单元将同一所述被检索数据的提交申请总次数及查看详情总次数进行加权，得到与被检索数据对应的热度统计结果。

4.根据权利要求3所述的基于Elasticsearch的数据处理方法，其特征在于，所述通过数据处理单元根据所述DML语言数据，确定与被检索数据对应的提交申请总次数及查看详情总次数的步骤，包括：

通过数据处理单元对所述DML语言数据按预设统计时长进行提取，得到待统计数据；

根据所述待统计数据按预设统计规则，确定与被检索数据对应的提交申请总次数及查看详情总次数。

5.根据权利要求1所述的基于Elasticsearch的数据处理方法，其特征在于，所述通过所述检索服务单元对所述初级检索结果进行动态调整，确定目标检索结果的步骤，包括：

通过所述检索服务单元对所述初级检索结果，按组合条件、过滤功能进行检索，得到所述目标检索结果。

6.根据权利要求5所述的基于Elasticsearch的数据处理方法，其特征在于，所述组合条件包括：自定义搜索条件、所述Elasticsearch的内置查询条件、所述Elasticsearch的复合型查询条件中的至少一种。

7.根据权利要求6所述的基于Elasticsearch的数据处理方法，其特征在于，所述通过所述检索服务单元对所述初级检索结果，按组合条件、过滤功能进行检索，得到所述目标检索结果的步骤，包括：

当所述组合条件包括所述自定义搜索条件时，根据被拖拽到所述检索服务单元的检索区的查询条件，得到所述自定义搜索条件，其中，所述查询条件为查询条件列表中的条件；

通过所述检索服务单元将所述自定义搜索条件组装为一个包裹检索的入参；

通过所述Elasticsearch根据所述包裹检索进行检索；

其中，所述检索服务单元的拖拽功能由vue框架提供，所述检索服务单元的页面在加载的时候根据页面默认数据进行异步加载得到所述查询条件列表。