[发明专利]用于低延迟数据存取的数据流分割有效
申请号: | 201480007137.8 | 申请日: | 2014-01-17 |
公开(公告)号: | CN104969213B | 公开(公告)日: | 2018-01-12 |
发明(设计)人: | 塞谬尔·拉什;德赫鲁巴乔蒂·博塔库尔;邵征;埃里克·黄 | 申请(专利权)人: | 脸谱公司 |
主分类号: | G06F17/00 | 分类号: | G06F17/00;G06F15/16 |
代理公司: | 北京康信知识产权代理有限责任公司11240 | 代理人: | 梁丽超,陈鹏 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 在本文中公开了一种通过分割数据流促进并且加速日志数据处理的技术。前端集群实时生成大量日志数据并且将日志数据传送至聚合集群。聚合集群被设计成聚合来自不同的前端服务器和集群的到来的日志数据流。聚合集群进一步将日志数据分割成多个数据流以便数据流被并行发送至接收应用。在一个实施方式中,随机分割日志数据以确保日志数据被均匀分布在分割数据流中。在另一个实施方式中,接收分割数据流的应用确定如何分割日志数据。 | ||
搜索关键词: | 用于 延迟 数据 存取 数据流 分割 | ||
【主权项】:
一种通信方法,包括:基于实时用户活动在多个前端服务器处产生日志数据;将所述日志数据传输至聚合服务器;在所述聚合服务器处聚合所述日志数据;通过基于所述日志数据的多个条目计算散列值、以及对于所述多个条目,以总桶数为模通过所述散列值确定桶号,基于所述桶号将所述日志数据分割到多个日志数据流;并且将所述日志数据流并行馈送到至少一个后端服务器。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱公司,未经脸谱公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201480007137.8/,转载请声明来源钻瓜专利网。
- 上一篇:相邻搜索结果探索
- 下一篇:可配置的嵌入式存储器系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置