[发明专利]将数据实时分类到数据压缩域有效
| 申请号: | 201480004452.5 | 申请日: | 2014-01-03 |
| 公开(公告)号: | CN104919430B | 公开(公告)日: | 2018-10-12 |
| 发明(设计)人: | N·哈罗瓦尼;L·德米多;S·马伦科夫;C·科伊夫曼;J·阿秘特;D·索特尼科夫;R·I·卡特;G·戈尔德伯格;D·哈尼克;O·马加里特 | 申请(专利权)人: | 国际商业机器公司 |
| 主分类号: | G06F12/00 | 分类号: | G06F12/00;G06F3/06;G06F17/30 |
| 代理公司: | 中国国际贸易促进委员会专利商标事务所 11038 | 代理人: | 吴信刚 |
| 地址: | 美国*** | 国省代码: | 美国;US |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 实时 分类 数据压缩 | ||
1.一种用于在计算环境中由处理器设备将数据实时分类到数据压缩域的方法,该方法包括:
通过读取随机选择的用于计算一组分类启发的写操作的数据来决定应该将写操作转发至哪个数据压缩域,从而为每个写操作产生指纹;以及
将具有相似指纹的写操作在压缩流中压缩在一起。
2.根据权利要求1所述的方法,进一步包括:将具有不同指纹的所述写操作分
开到不同的压缩流。
3.根据权利要求2所述的方法,还包括对每个所述写操作的每个指纹和之前转发至每个所述数据压缩域的写操作的指纹进行比较。
4.根据权利要求3所述的方法,进一步包括将具有所述相似指纹的所述写操作发送至压缩所述写操作的相似数据的所述数据压缩域。
5.根据权利要求4所述的方法,进步一步包括将所述写操作发送至新数据压缩域,其中新压缩流被创建。
6.根据权利要求1所述的方法,进一步包括使用启发法的以下组合或至少之一计算所述分类启发的组:随机选择的数据的熵,构成所述随机选择的数据的大多数字节的核心字符集和字符的大小,所述随机选择的数据或所述核心字符集的全部或部分直方图,所述随机选择的数据的主要字符的组或非主要字符的组,所述全部或部分直方图或所述核心字符集的平均值、方差和可选契机之一,以及所述数据的数据结构的指示。
7.根据权利要求1所述的方法,进一步包括使用保相似哈希SPH计算所述分类启发的组。
8.一种用于在计算环境中由处理器设备将数据实时分类到数据压缩域的系统,该系统包括:
工作在计算存储环境中的处理器设备,其中所述处理器设备:
通过读取随机选择的用于计算一组分类启发的写操作的数据来决定应该将写操作转发至哪个数据压缩域,从而为每个所述写操作产生指纹;以及
将具有相似指纹的写操作在压缩流中压缩在一起。
9.根据权利要求8所述的系统,其中所述处理器设备将具有不同指纹的所述写
操作分开到不同的压缩流。
10.根据权利要求9所述的系统,其中所述处理器设备对每个所述写操作的每个指纹和之前转发至每个所述数据压缩域的写操作的指纹进行比较。
11.根据权利要求10所述的系统,其中所述处理器装置将具有所述相似指纹的所述写操作发送至压缩所述写操作的相似数据的所述数据压缩域。
12.根据权利要求11所述的系统,其中所述处理器装置将所述写操作发送至新数据压缩域,其中新压缩流被创建。
13.根据权利要求8所述的系统,其中所述处理器装置使用启发法的以下组合或至少之一计算所述分类启发的组:
随机选择的数据的熵,构成所述随机选择的数据的大多数字节的核心字符集和字符的大小,所述随机选择的数据或所述核心字符集的全部或部分直方图,
所述随机选择的数据的主要字符的组或非主要字符的组,所述全部或部分直方图或所述核心字符集的平均值、方差和可选契机之一,以及所述数据的数据结构的指示。
14.根据权利要求8所述的系统,其中所述处理器装置使用保相似哈希SPH计算所述分类启发的组。
15.一种计算机程序产品,由处理器将数据实时分类到数据压缩域,所述计算机程序产品包括其上存储有计算机可读程序代码部分的计算机可读存储介质,其中所述计算机可读程序代码部分被所述处理器执行时实施以下步骤:
通过读取随机选择的用于计算一组分类启发的写操作的数据来决定应该将写操作转发至哪个数据压缩域,从而为每个写操作产生指纹;以及
将具有相似指纹的写操作在压缩流中压缩在一起。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201480004452.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





