[发明专利]数据存储方法及装置在审
| 申请号: | 201610616083.6 | 申请日: | 2016-07-29 |
| 公开(公告)号: | CN107665093A | 公开(公告)日: | 2018-02-06 |
| 发明(设计)人: | 夏文;付忞;吴大立;古亮 | 申请(专利权)人: | 深圳市深信服电子科技有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 深圳市世纪恒程知识产权代理事务所44287 | 代理人: | 胡海国 |
| 地址: | 518052 广东省深圳市南*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 存储 方法 装置 | ||
1.一种数据存储方法,其特征在于,所述数据存储方法包括:
在接收到写数据请求时,对所述写数据请求对应的待存储数据进行采样处理获取样本数据,计算所述样本数据的信息熵,并根据计算得到的所述信息熵判断所述待存储数据是否可压缩;
若根据所述信息熵判定所述待存储数据可压缩,则将所述待存储数据进行压缩处理后写入到存储系统;
若根据所述信息熵判定所述待存储数据不可压缩,则将所述待存储数据写入到所述存储系统。
2.根据权利要求1所述的数据存储方法,其特征在于,所述对所述写数据请求对应的待存储数据进行采样处理获取样本数据,计算所述样本数据的信息熵,并根据计算得到的所述信息熵判断所述待存储数据是否可压缩的步骤包括:
对所述写数据请求对应的待存储数据进行全局采样处理获取全局样本数据,计算所述全局样本数据的信息熵;
判断所述全局样本数据的信息熵是否小于第一预设阈值,其中,当所述全局样本数据的信息熵小于所述第一预设阈值时,判定所述待存储数据可压缩。
3.根据权利要求1所述的数据存储方法,其特征在于,所述对所述写数据请求对应的待存储数据进行采样处理获取样本数据,计算所述样本数据的信息熵,并根据计算得到的所述信息熵判断所述待存储数据是否可压缩的步骤包括:
对所述写数据请求对应的待存储数据进行全局采样处理获取全局样本数据,计算所述全局样本数据的信息熵;
当所述全局样本数据的信息熵小于第一预设阈值时,从所述待存储数据中抽取一段连续的数据作为局部样本数据,计算所述局部样本数据的信息熵;
判断所述局部样本数据的信息熵是否小于第二预设阈值,其中,当所述局部样本数据的信息熵小于所述第二预设阈值时,判定所述待存储数据可压缩。
4.根据权利要求2或3所述的数据存储方法,其特征在于,所述对所述写数据请求对应的待存储数据进行全局采样处理获取全局样本数据,计算所述全局样本数据的信息熵的步骤包括:
按照预设采样间隔对所述待存储数据进行全局采样处理,获取全局样本数据;
计算获取到的所述全局样本数据中各个字节的出现频度,并根据所述各个字节的出现频度计算所述全局样本数据的所述信息熵。
5.根据权利要求4所述的数据存储方法,其特征在于,所述预设采样间隔包括多个不同的间隔值,在按照预设采样间隔从所述待存储数据中取样的过程中,每相邻两次抽取样本数据时使用的所述间隔值不同。
6.一种数据存储装置,其特征在于,所述数据存储装置包括:
样本采集模块,用于在接收到写数据请求时,对所述写数据请求对应的待存储数据进行采样处理获取样本数据;
信息熵计算模块,用于计算所述样本数据的信息熵;
压缩判断模块,用于根据计算得到的所述信息熵判断所述待存储数据是否可压缩;
数据存储模块,用于若根据所述信息熵判定所述待存储数据可压缩,则将所述待存储数据进行压缩处理后写入到存储系统;
所述数据存储模块,还用于若根据所述信息熵判定所述待存储数据不可压缩,则将所述待存储数据写入到所述存储系统。
7.根据权利要求6所述的数据存储装置,其特征在于,所述信息熵计算模块还用于:对所述写数据请求对应的待存储数据进行全局采样处理获取全局样本数据,计算所述全局样本数据的信息熵;
所述压缩判断模块还用于:判断所述全局样本数据的信息熵是否小于第一预设阈值,其中,当所述全局样本数据的信息熵小于所述第一预设阈值时,判定所述待存储数据可压缩。
8.根据权利要求6所述的数据存储装置,其特征在于,所述信息熵计算模块还用于:对所述写数据请求对应的待存储数据进行全局采样处理获取全局样本数据,计算所述全局样本数据的信息熵;
所述样本采集模块还用于:当所述全局样本数据的信息熵小于第一预设阈值时,从所述待存储数据中抽取一段连续的数据作为局部样本数据,计算所述局部样本数据的信息熵;
所述压缩判断模块还用于:判断所述局部样本数据的信息熵是否小于第二预设阈值,其中,当所述局部样本数据的信息熵小于所述第二预设阈值时,判定所述待存储数据可压缩。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市深信服电子科技有限公司,未经深圳市深信服电子科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610616083.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种存储方法及装置
- 下一篇:存储器空间管理的设备、方法及可读存储介质
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





