[发明专利]基于DB轻量级KAFKA管理及定时任务队列系统

说明书

本发明公开了一种基于DB轻量级KAFKA管理及定时任务队列系统，kafka工具包，微服务消息生产者集群、微服务消息消费者集群、kafka信息管理服务集群、kakfa定时延迟任务服务集群和自动预警平台；kafka工具包插入到移动终端，用户请求启动kafka工具包的同时，微服务消息生产集群和微服务消息消费者集群也同时启动；并且在微服务消息生产集群和微服务消息生产者集群两者启动之前，kafka工具包向kafka信息管理服务集群申请校验主题；kafka信息管理服务集群通过kafka工具包的校验接口，利用超文本传输协议调用校验接口并验证使用的主题是否在kafka集群信息库中，如果不在则该主题为非法，kafka工具包将被禁止启动，若校验成功，则kafka工具包则可正常使用。

技术领域

本发明涉及互联网领域，具体涉及一种基于DB轻量级KAFKA管理及定时任务队列系统。

背景技术

目前随着互联网技术的发展，软件的使用频率越来越高，软件的复杂性越来越大，使用微服务开发系统的场景越来越多。微服务的开发过程中，服务之间的通信、消息中间件的使用越来越频繁，其中kafka的使用最多。但是对kafka的主题统一管理却没有比较好的方案，同时kafka的消息类型比较单一，不支持延迟消息，对特殊需要做延迟的业务影响较大。因此需要一整套管理kafka主题、kafka延迟功能的系统，同时为了使用kafka的方便，需要一个可插拔使用的kakfa工具包，以此提升kafka的使用效益。

发明内容

为解决现有技术存在的不足，本发明提供了一种基于DB轻量级KAFKA管理及定时任务队列系统。

本发明的技术方案为：一种基于DB轻量级KAFKA管理及定时任务队列系统， kafka工具包，微服务消息生产者集群、微服务消息消费者集群、kafka信息管理服务集群、kakfa定时延迟任务服务集群和自动预警平台；kafka工具包插入到移动终端，用户请求启动kafka工具包的同时，微服务消息生产集群和微服务消息消费者集群也同时启动；并且在微服务消息生产集群和微服务消息生产者集群两者启动之前，kafka工具包向kafka信息管理服务集群申请校验主题；kafka信息管理服务集群通过kafka工具包的校验接口，利用超文本传输协议调用校验接口并验证使用的主题是否在kafka集群信息库中，如果不在则该主题为非法，kafka工具包将被禁止启动，若校验成功，则kafka工具包则可正常使用。

优选的技术方案：kakfa定时延迟任务服务集群是接收其他业务服务通过kafka工具包发送的延迟定时消息；kakfa定时延迟任务服务集群接收消息后将数据保存延迟数据库内。

优选的技术方案：延伸数据库内部有个无限循环器，通过当前时间与内置时间比对算法，查询是否有到期的延迟定时消息，如果有延迟定时消息则查询相应的数据并将该数据重新发回至kafka队列；这样解决了kafka没有延迟消息功能的弊端，同时异常消息也可以通过保存数据库进行统计。

优选的技术方案：自动预警平台接收来自各个业务服务的异常数据，然后将异常数据保存异常数据库内，自动预警平台中的异常分类单元管理各种类型的异常数据，异常分类单元内并存储有指定的开发人员信息，开发人员对每种异常及性能阀值配置，异常数据达到阀值还可发送邮件预警通知或者第三方通知。

优选的技术方案：自动预警平台中内置自动查询器，实现异常信息的多条件查询，并实时发送到开发着邮箱。

优选的技术方案：kafka工具包内置若干个应用程序接口；kafka工具包可发送同步、异步的kafka消息； kafka工具包内置异常主题单元，异常主题单元内存储相应的的定制化异常消息主题。

优选的技术方案：kafka信息管理服务集群内设有kafka主题信息选项，创建主题选项、删除主题选项、更新主题选项和分配权限选项；分配权限选项对kafka主题信息选项，创建主题选项、删除主题选项、更新主题选项的每个主题的业务用途、负责人、使用服务具有管理权限。