[发明专利]一种签收数据查询方法和系统

说明书

本发明公开了一种签收数据查询方法和系统，所述方法包括如下步骤：获取PostgreSQL数据库中签收查询核心表单，并建立PostgreSQL数据库和Kafka集群的通讯链接；将所述签收查询核心表单同步到所述Kafka集群；在所述Kafka集群中将所述签收查询核心表单封装成json数据；将封装完成后的json数据同步到ElasticSearch数据库中，并启动签收查询服务。所述方法和系统采用ElasticSearch搜索引擎，将PostgreSQL数据库中的数据通过Kafka集群以特定的格式将数据同步到ElasticSearch搜索引擎中进行签收和业务查询，从而避免采用复杂的多表关联、嵌套查询技术，可以提高签收数据的处理速度和能力。

技术领域

本发明涉及大数据领域，特别涉及一种签收数据查询方法和系统。

背景技术

当前签收功能模块的待签收、待寄出、已寄出、已签收四个模块的数据查询是基于PostgreSQL数据库实现的实时查询。产品中所提供的动态查询、模糊查询等高级搜索功能，所采用的技术方案是通过在PostgreSQL数据库中进行多表关联、子查询、左右匹配模糊查询等方式实现。然而现有的上述技术方案实现复杂，在实现过程中需要采用SQL进行多表关联、嵌套查询等复杂操作，开发是需要庞大的工作量，而且随着业务量的增长，SQL的性能会越差，及其影响用户的体验。

发明内容

本发明其中一个发明目的在于提供一种签收数据查询方法和系统，所述方法和系统采用ElasticSearch搜索引擎，将PostgreSQL数据库中的数据通过Kafka集群以特定的格式将数据同步到ElasticSearch搜索引擎中进行签收和业务查询，从而避免采用复杂的多表关联、嵌套查询技术，可以提高签收数据的处理速度和能力。

本发明另一个发明目的在于提供一种签收数据查询方法和系统，所述方法和系统通过封装成适配ElasticSearch搜索引擎格式的数据，降低代码的耦合度，从而使得整个签收查询业务的可维护性更高，减少代码层面的协调处理。

本发明另一个发明目的在于提供一种签收数据查询方法和系统，所述方法和系统由于较少的代码耦合度，因此可以实现查询接口的快速开发，使得业务的拓展性能更好。

本发明另一个发明目的在于提供一种签收数据查询方法和系统，所述方法和系统建立对签收查询核心表单的监听，并对指定核心表单中的指定字段进行分词，用于ElasticSearch搜索引擎的模糊查询，从而提高签收数据查询的响应速度。

为了实现至少一个上述发明目的，本发明进一步提供一种签收数据查询方法，所述方法包括如下步骤：

获取PostgreSQL数据库中签收查询核心表单，并建立PostgreSQL数据库和Kafka集群的通讯链接；

将所述签收查询核心表单同步到所述Kafka集群；

在所述Kafka集群中将所述签收查询核心表单封装成json数据；

将封装完成后的json数据同步到ElasticSearch数据库中，并启动签收查询服务。

根据本发明其中一个较佳实施例，所述签收查询核心表单的同步方法包括：

在Kafka集群中创建签收表查询核心表单topic；

配置对应的签收查询核心表单参数；

配置kafka connector，并指定区分键为单据号；

根据所述单据号将对应的签收查询核心表单同步至topic；

根据本发明另一个较佳实施例，所述签收查询核心表单包括：签收任务表、对私报销单据表、对公报销单据表和单据审批任务表，在Kafka集群中启动Kafka脚本执行对所述签收查询核心表单的同步操作。