[发明专利]一种用于数据共享交换业务运行监控系统的实现方法

说明书

本发明提供一种用于数据共享交换业务运行监控系统的实现方法，属于Java Web应用开发技术领域，本发明以保障业务的正常运行为宗旨，保障数据共享交换平台的正常运行为目标，对数据共享交换平台从底层基础设施到上层业务进行整体的监控。主要包含基础设施的监控、服务调用的监控、交换任务的监控、用户操作的审计、运维问题的处理等。通过运行监控平台，实现从异常情况及时发现到告警问题快速定位，再到运维工单及时处理，最后形成知识沉淀的一体化信息系统监控运维方案。

技术领域

本发明涉及Java Web应用开发技术，尤其涉及一种用于数据共享交换业务运行监控系统的实现方法。

背景技术

数据共享交换平台目前包含子系统众多，主要包括全国政务信息共享网站、政务信息资源目录系统、统一资源管理系统、资源申请和审核系统、服务网关、交换系统等。各子系统虽然承载不同的业务，但是之间业务关联密切，一旦发生问题，难于定位解决。目前数据共享交换平台多靠接收使用方客户反馈或人工排查系统日志发现问题，不仅处理效率低，而且人力资源耗费严重，问题定位以及解决速度远远无法满足要求。

传统的监控应用系统方式：在各台服务器上用传统的linux工具(如cat,tail,sed,awk,grep等)对日志进行简单的分析和处理，基本上可以认为是命令级别的操作，成本很低，速度很快，但难以复用，也只能完成基本的操作。在服务器多了之后，分散管理的成本变得越来越多，所以会利用rsyslog这样的工具，把各台机器上的日志汇总到某一台指定的服务器上，进行集中化管理。这样带来的问题是日志量剧增，小作坊式的管理基本难以满足需求。其中系统自动化程度低，人力资源成本耗费大。

发明内容

为了解决以上技术问题，本发明提供了一种用于数据共享交换业务运行监控系统的实现方法,解决数据共享交换平台的整体监控，将平台本身的运行情况、平台上业务的运行情况都能够及时发现问题，通过告警、工单等方式及时进行处理，保障平台运行的稳定性以及业务的正常运转。

本发明的技术方案是：

本发明的一种用于数据共享交换业务运行监控系统的实现方法，为保障数据共享交换平台各子系统的正常运行，需要对数据共享交换平台进行统一监控。

运行监控系统将统一登录系统输出的登陆日志、多个子系统输出的用户操作日志、服务网关的服务调用日志、交换通道产生的交换任务运行日志等通过大数据组件将日志接入统一监控系统；将其他业务统计数据、告警信息等通过REST接口、ETL抽取等方式接入运行管理系统存储库。

通过接入结构化的业务数据与非结构化日志数据，将整个数据共享交换平台的底层基础设施、业务运行的数据纳入监控系统。

运行监控系统采集到数据共享交换平台基础数据后，下一步就是对采集来的数据进行处理。运行监控系统采集到的日志信息，通过大数据组件进行清洗过滤，将日志信息进行加工处理，然后进行分片索引，将日志数据放入大数据存储中，对上层(可视化层)提供检索服务。运行监控系统采集到的业务统计数据、系统运行情况数据，通过定时任务等，将数据进行分析加工，及时根据共享交换平台的业务配置规则进行业务告警等。基于业务库基础数据，加工成为告警库，基于告警库，配合工单处理等运维管理功能，将知识沉淀形成知识库。

使用JAVA EE相关技术来构建监控平台技术架构。根据上述给出的总体架构设计，以及目前业界主流的Spring Boot技术架构，结合监控系统的特点，给出整个监控平台的总体技术架构。

整个平台架构从层次上分为三层，即：表现层、业务层、持久层。

表现层总体上是构建在freemarkerTemplates技术之上的，加上传统的HTML、CSS、JAVASCRIPT技术，在浏览器中进行界面展现。