[发明专利]一种基于NB-lot网络的物联网表采集的分层集群处理方法

说明书

本发明公开了一种基于NB‑lot网络的物联网表采集的分层集群处理方法，属于计算机领域。因采用物联网表后，采集系统要对上千万的电表进行直接采集，因此为支撑系统的高并发性和运行可靠性，采集前置系统采用分层集群架构设计，系统可将采集前置服务按照处理逻辑划分为通讯接入、采集处理、业务调度、分布式缓存等，各逻辑分层支持独立集群部署。能够更有效支撑物联网表的采集，保障电网公司的采集系统稳定可靠运行。

技术领域

本发明属于计算机数据处理以及物联网技术领域，特别涉及一种基于NB-lot网络的物联网表采集的分层集群处理方法。

背景技术

在基于NB-lot物联网表环境下，采集系统需要面对电网公司千万级的智能电表进行直连，产生的采集任务及相关报文数据数以亿计，极大影响采集服务器、分布式存储环境及数据库的性能以及业务应用。因此有必要采用分层集群的方式，对现有采集技术进行改进，提高采集数据存取性能，支撑业务高效应用。

发明内容

有鉴于此，本发明的目的是提供一种基于NB-lot网络的物联网表采集的分层集群处理方法。通过在采集系统中将采集划分为通讯接入、采集处理、业务调度、分布式缓存等，各逻辑分层支持独立集群部署，其中，所述分布式缓存基于Redis管理，负责执行采集数据同步写入、分块存储和并行读取功能。

本发明的目的是通过以下技术方案实现的：

一种基于NB-lot网络的物联网表采集的分层集群处理方法，该方法为：通过在采集系统中划分出通讯接入、采集处理、业务调度、分布式缓存进行数据统一采集；

其中，所述通讯接入管理，负责终端实时Socket通讯链接和报文转发，在通讯接入服务集群的前端部署硬件负载均衡器实现终端接入的负载均衡。

进一步，所述Socket通讯链接为在通讯服务集群的前端部署硬件负载均衡器实现终端的接入。

其中，所述报文转发为在通讯接入管理中实现表码类数据报文、事件类、终端心跳类的报文转发与处理。

进一步，所述表码类数据报文为通讯接入管理将接收到终端上报的定时表码类报文数据进行处理。

进一步，所述事件类数据报文为通讯接入管理将接收到的终端实时告警类报文数据进行处理。

进一步，所述终端心跳类报文为通讯接入管理将接收到的心跳报文类数据进行处理。

其中，所述采集处理服务是为将通讯接入管理接收到的报文数据进行处理，分为上行采集任务服务处理和下行采集任务服务处理。

进一步，所述上行采集任务服务处理是采集处理服务集群主要负责采集数据报文的解析，在采集处理服务中通过规约适配器满足各类通信规约版本解析，采集数据报文解析完成后，将数据写入分布式缓存中。

进一步，所述下行采集任务服务处理是采集处理服务完成下行指令报文组帧，调用规约适配器实现各类通信规约版本的报文组帧，根据需要报文加密处理后，通过通讯接入集群发送给现场终端执行。

其中，所述业务调度主要负责从分布式缓存服务中及时获取采集数据，并将采集数据进行加工计算后，实现批量数据入库。分为上行采集数据调度处理和下行采集数据调度处理。

进一步，上行采集业务调度主要负责从分布式缓存服务中及时获取采集数据，并将采集数据进行加工计算后，实现批量数据入库。

进一步，下行采集业务调度实时监听分布式缓存中指令队列的变化情况，获取指令任务，并根据指令类型、终端类型、终端通信方式等对指令队列进行分组与智能调度，提交采集处理服务集群进行处理。

其中，所述分布式缓存基于Redis管理，负责执行采集数据(包含采集到的电表数据和档案数据)同步写入、分块存储和并行读取功能。