[发明专利]工业物联网数据传输Worker服务实现方法及装置

说明书

本申请揭示了一种工业物联网数据传输Worker服务实现方法及装置，该方法包括在Worker服务启动时，利用路由信息请求接口从DC系统获取路由信息；根据路由信息匹配Controller服务，通过Helix服务与匹配的Controller服务交互；每隔预定时间间隔利用规则引擎请求接口从DC系统获取并更新规则引擎；利用IMessageTransformer接口批量处理ConsumerRecord数据。本申请根据配置文件参数获取路由匹配Controller，在处理数据时通过路由来获取数据并根据规则引擎识别设备数据类型，解决工业设备数据通过网关统一发送数据混合问题。

技术领域

本发明属于工业物联网数据传输技术领域，涉及一种工业物联网数据传输Worker服务实现方法及装置。

背景技术

在当前的工业设备数据系统生态中，设备数据统一由采集网关对外部Kafka集群实时上传数据。但是在采集网关上传数据过程中往往因工业现场状况、设备类型、生产厂家不同，会造成同种设备数据不同数据结构相互混合、不同厂家设备状态标识相同含义不同、设备种类繁多需要创建多个Topic来发送数据，导致后续数据清洗复杂，新增设备数据需新开发任务来处理数据，且Kafka集群需创建新Topic增加运维维护工作量。

发明内容

为了解决相关技术的技术问题，本申请提供了一种工业物联网数据传输Worker服务实现方法及装置，技术方案如下：

第一方面，本申请提供了一种工业物联网数据传输Worker服务实现方法，所述方法包括：

在Worker服务启动时，利用开发的路由信息请求接口从DC系统获取路由信息，所述路由信息包括消费者Kafka集群路由信息和生产者Kafka集群路由信息；

根据所述路由信息匹配Controller服务，通过Helix服务与匹配的所述Controller服务交互；

每隔预定时间间隔利用开发的规则引擎请求接口从所述DC系统获取并更新规则引擎，所述规则引擎包括：SrcTopic、DestTopic、规则条件和规则元素；

利用开发的RuleMessageTransformer类实现IMessageTransformer接口，利用IMessageTransformer接口在数据批量处理processList方法中处理ConsumerRecord数据。

可选地，所述利用开发的路由信息请求接口从DC系统获取路由信息，包括：

通过预存的配置文件参数调用所述路由信息请求接口以访问所述DC系统，从所述DC系统获取路由信息。

可选地，所述每隔预定时间间隔利用开发的规则引擎请求接口从所述DC系统获取并更新规则引擎，包括：

在Worker服务WorkerInstance类中创建ExecutorService线程池；

利用所述ExecutorService线程池每隔预定时间间隔从所述DC系统获取当前路由信息内所有规则引擎Map集合；

把所述规则引擎Map集合的引用指向开发的RuleMessageTransformer类中的规则引擎Map集合，完成数据规则引擎的更新并更新规则引擎。

可选地，所述利用IMessageTransformer接口在数据批量处理processList方法中处理ConsumerRecord数据，包括：

利用IMessageTransformer接口在processList方法中，从所述规则引擎中匹配与所述ConsumerRecord数据对应的规则引擎，利用匹配的所述规则引擎中的规则元素对所述ConsumerRecord数据进行处理，在ProducerThread类中完成数据批量多数据源传输。