[发明专利]一种数据处理方法及装置有效
申请号: | 201280002719.8 | 申请日: | 2012-12-13 |
公开(公告)号: | CN104012055A | 公开(公告)日: | 2014-08-27 |
发明(设计)人: | 左少夫 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04L12/811 | 分类号: | H04L12/811 |
代理公司: | 广州三环专利代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本发明实施例提供了一种数据处理方法,包括:构造沿数据流滑动的数据窗口,所述数据窗口的长度为预设数目的字节;所述数据窗口滑动时,判断所述数据窗口中心位置数据对应的哈希值是否为极值;若是,则确定该位置为第一个中间极值点,所述数据窗口继续滑动以确定后续的中间极值点;若否,则所述数据窗口继续滑动以确定第一个中间极值点;提取相邻中间极值点之间的数据组合成有效数据分片,将所述中间极值点之外的数据作为无效数据分片。本发明实施例还提供了一种数据处理装置。采用本发明,可提升数据去重的效果,提高数据处理的效率,降低数据分片的管理和维护成本。 | ||
搜索关键词: | 一种 数据处理 方法 装置 | ||
【主权项】:
PCT国内申请,权利要求书已公开。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201280002719.8/,转载请声明来源钻瓜专利网。
- 上一篇:辅助公共控制信道的接收方法及其装置
- 下一篇:分布式移动接入点获取