[发明专利]一种分布式系统动态智能服务治理方法

说明书

本发明涉及分布式系统的治理技术，旨在提供一种分布式系统动态智能服务治理方法。该方法包括：为分布式系统中的服务应用程序配置边车进程；请求先经过边车进程的处理，由后者充当服务应用程序的代理；边车进程为监控调度服务器记录请求的信息，并充当其采集代理；监控调度服务器利用运行期间内的累积数据进行拟合，计算出当前负载下的最优调度策略，然后下发调度指令。本发明能降低业务系统复杂度，减少分布式系统中的功能冗余；提高系统的可用性，提高系统的负载能力降低响应时间；智能监控告警，让告警真正产生意义和价值；利于线上问题的排查；给系统动态扩容提供判断依据。

技术领域

本发明涉及分布式系统的治理技术，特别涉及一种分布式系统动态智能服务治理方法。

背景技术

分布式系统的运维往往依赖于链路的监控。通过监控每个服务的响应时间、延迟时间等，最后得到整个调用链的响应时间，并且通过压力测试等方式得到系统的负载能力。项目运行时，QPS等指标超出一定数值后发出报警并限流。IT系统的限流同理，往往采用压力测试加经验判断的方法设定。动态限流能根据各个子系统的状态区分限流，保障整个系统的可用性与稳定性。

分布式系统随着服务拆分会带来服务治理、监控以及可用性变低的问题。目前的方案往往不能智能预警，限流阈值不能根据系统状态动态设定，一个服务的失败或者超时往往造成级联的失败或者超时，最终给整个系统造成灾难性的结果。

分布式系统解决了很多软件开发中的问题，也带来很多困难，针对这些困难业界有一些解决方案。针对链路监控谷歌《Dapper》论文描述了一种解决方案；监控业界有prometheus等为代表的方案；这些方案解决了一些现实问题，但是还远远不够，例如：

1.对业务系统存在侵入性：现有的链路追踪系统实现均需要修改现有业务代码，作定制开发，且正在运行的老系统难以被兼容进去。

2.难以适配异构系统：如果系统使用了不同操作系统，不同的编程语言，现有的方案难以完全覆盖。

3.无法动态智能进行告警和干预：现有的告警系统往往设定固定的阈值，超出阈值后发出告警。没有引入负反馈机制。由于系统的负载和系统的性能并非线性关系，固定的阈值干预并不能让系统处于最理想的运行状态。

发明内容

本发明要解决的技术问题是，克服现有技术中的不足，提供一种分布式系统动态智能服务治理方法。

为解决上述技术问题，本发明采用的的解决方案是：

提供一种分布式系统动态智能服务治理方法，包括：

(1)为分布式系统中的服务应用程序配置边车进程，即，能够以边车模式运行的独立进程；边车进程能够与一起运行，在为其提供额外能力的同时，还能根据预设方案对服务应用程序进行管理和调度；

(2)请求在到达服务应用程序前先经过边车进程的处理，由后者充当服务应用程序的代理，实现对请求链路、服务运行环境的监控，并对服务进行限流；

(3)边车进程记录请求的开始和结束时间，并把该请求的ID同步到监控调度服务器；同时，边车进程还充当监控调度服务器的采集代理，按设定的时间间隔实时收集服务运行环境的监控指标；

(4)监控调度服务器在收到边车进程采集的新的负载数据和性能指标后，利用运行期间内的累积数据进行拟合，计算出当前负载下的最优调度策略，然后下发调度指令。

本发明中，步骤(3)中所述服务运行环境的监控指标包括：CPU使用率、内存使用率、磁盘IO与网络IO、请求的返回状态码。

本发明中，在分布式系统中，不同服务应用程序所配置的边车进程是通用的，其区别仅在于配置参数的不同。

本发明中，边车进程的代理服务是通过下述方式实现的：