[发明专利]一种基于消息队列的海量用户行为数据采集方法与系统在审
| 申请号： | 201510036709.1 | 申请日： | 2015-01-23 |
| 公开（公告）号： | CN104579789A | 公开（公告）日： | 2015-04-29 |
| 发明（设计）人： | 余敬龙 | 申请（专利权）人： | 广东能龙教育股份有限公司 |
| 主分类号： | H04L12/24 | 分类号： | H04L12/24;H04L29/08 |
| 代理公司： | 广州嘉权专利商标事务所有限公司 44205 | 代理人： | 张海文 |
| 地址： | 528403 广东省*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于消息队列的海量用户行为数据采集系统，包括：日志拦截模块，用于用户行为数据的过滤及预处理；消息队列系统，用户行为数据包的中转、分发；用户行为处理器模块，用于实时用户行为数据的处理、结果反馈及原始数据的批量存储。本发明提供的基于消息队列的用户行为数据采集方法与系统，把消息队列引入到海量的用户行为数据采集中，充分利用消息队列：数据传输高效、数据吞吐量大、横向扩展性好等特点用于海量的用户行为数据采集，提高了数据采集实时性及数据采集效率，特别是互联网海量的用户行为采集提供了稳定、高效及实时性好的解决方案。 | ||
| 搜索关键词： | 一种 基于 消息 队列 海量 用户 行为 数据 采集 方法 系统 | ||
【主权项】：
一种基于消息队列的海量用户行为数据采集方法，其特征在于：包括以下步骤S1、使用植入脚本在页面中把用户行为数据收集为日志记录并把记录数据通过Http提交到服务器端后台；S2、对日志记录直接通过日志拦截器进行预处理；S3、对S2经过预处理的用户行为数据直接发送到消息队列中，等待处理器采集；S4、用户行为处理器订阅S3中消息队列的数据并进行处理，用户行为处理器根据S3消息队列的数据量动态增加处理器以加快用户行为数据的采集。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于广东能龙教育股份有限公司，未经广东能龙教育股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201510036709.1/，转载请声明来源钻瓜专利网。
