[发明专利]一种基于logstash+kafka数据传输方法在审
| 申请号： | 201810947702.9 | 申请日： | 2018-08-20 |
| 公开（公告）号： | CN109104487A | 公开（公告）日： | 2018-12-28 |
| 发明（设计）人： | 颜朋 | 申请（专利权）人： | 浪潮软件股份有限公司 |
| 主分类号： | H04L29/08 | 分类号： | H04L29/08 |
| 代理公司： | 济南信达专利事务所有限公司 37100 | 代理人： | 刘继枝 |
| 地址： | 250101 山东*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于logstash+kafka数据传输方法，包括业务数据生产端操作和业务数据消费端操作；1）通过业务数据生产端logstash，自动采集业务系统数据库中业务数据，并传输至中间件kafka；2）所述的中间件kafka收集各所述的业务数据生产端传输的数据，统一发送至业务数据消费端logstash；3）所述的业务数据消费端logstash接收所述的中间件kafka的消息，转为数据文件，并存储至目标数据库。本发明和现有技术相比，配置操作简便，处理速度快，能有效实现较为分散的业务数据的采集、处理、存储等操作，可以较为迅速方便的搭建业务数据生产端与消费端传输通道，且扩展性良好，降低开发及运维难度。 | ||
| 搜索关键词： | 业务数据 中间件 数据传输 存储 生产 目标数据库 传输通道 配置操作 数据文件 业务系统 有效实现 自动采集 扩展性 传输 运维 数据库 采集 发送 开发 统一 | ||
【主权项】：
1.一种基于logstash+kafka数据传输方法，其特征在于，包括业务数据生产端操作和业务数据消费端操作；操作步骤如下：步骤1）通过业务数据生产端logstash，自动采集业务系统数据库中业务数据，并传输至中间件kafka；步骤2）所述的中间件kafka收集各所述的业务数据生产端传输的数据，统一发送至业务数据消费端logstash；步骤3）所述的业务数据消费端logstash接收所述的中间件kafka的消息，转为数据文件，并存储至目标数据库。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浪潮软件股份有限公司，未经浪潮软件股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201810947702.9/，转载请声明来源钻瓜专利网。
