[发明专利]一种控制DDP模块开关的方法及其相关装置在审
申请号: | 201810543668.9 | 申请日: | 2018-05-30 |
公开(公告)号: | CN108762680A | 公开(公告)日: | 2018-11-06 |
发明(设计)人: | 何孝金 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据流 模块开关 相关装置 特征库 特征识别模块 重复数据删除 开关判断 人为干预 智能控制 预置 申请 | ||
本申请实施例公开了一种控制DDP模块开关的方法及其相关装置,用于智能控制DDP模块的开启或关闭,减少人为干预,使得DDP模块的开关判断更为准确。本申请实施例方法包括:获取第一数据流;通过特征识别模块识别所述第一数据流,得到第一特征;判断预置的特征库中是否存有所述第一特征;若存有所述第一特征,则从所述特征库中获取所述第一特征对应的重复数据删除DDP率;若所述DDP率大于第一阈值,则开启所述DDP模块;若所述DDP率不大于所述第一阈值,则关闭所述DDP模块。
技术领域
本申请涉及存储领域,尤其涉及一种控制DDP模块开关的方法及其相关装置。
背景技术
现今,计算机越来越普及,计算机用户一般都会存储很多数据,且用户计算机内一般总会有一些重复的数据,这些重复的数据存在于存储空间中相当浪费数据存储空间。
重复数据删除(deduplication,DDP)是一种可减少数据存储空间的核心技术,尤其是在存储空间成本较高的全闪存存储阵列(aLL flash array,AFA),DDP已经成为必备的特性。DDP一般算法为:将新写入的数据计算一个指纹,然后与已存储的指纹对比,如果发现有相同指纹,则记录相同数据的位置,当前数据不写盘。然而做DDP对系统计算资源占用较大,对主机请求的写时延有一定影响(通常在10%左右)。对不同的主机业务来说,DDP带来的价值是不一样的,对于DDP率很高的应用,比如虚拟机场景(DDP率通常高于6:1),少量的性能影响带来了巨大的空间节省是非常值得的;但是对于DDP率很低的场景,比如视频监控(DDP率通常小于2:1),开启DDP节省的空间不大,反而影响业务的性能,此时用户通常希望关闭重删功能。
然而现有的DDP开关都是需要人工干预的,也即需要人为明确识别后续的应用场景可能的重删率,再人为设置DDP开关开启或关闭。这种方式有2个很大的问题:
1、靠人为设置的开关,往往太固定,完全依赖人的操作,如果人为设置错误或者应用场景变更而人为忘记变更设置,那么最终是否做DDP的设置就可能是错误的。
2、某些应用会将当前存储空间提供给第三方应用,至于第三方应用具体的业务,存储设备无从知晓,维护人员根本就判断不了是否应该开启DDP。
发明内容
本申请实施例提供了一种控制DDP模块开关的方法及其相关装置,用于智能控制DDP模块的开启或关闭,减少人为干预,使得DDP模块的开关判断更为准确。
本申请实施例的第一方面提供了一种控制DDP模块开关的方法,具体包括:获取第一数据流;通过特征识别模块识别所述第一数据流,得到第一特征;判断预置的特征库中是否存有所述第一特征;若存有所述第一特征,则从所述特征库中获取所述第一特征对应的重复数据删除DDP率;若所述DDP率大于第一阈值,则开启所述DDP模块;若所述DDP率不大于所述第一阈值,则关闭所述DDP模块。
在一种可能的设计中,在本申请实施例第一方面的第一种实现方式中,所述判断预置的特征库中是否存有所述第一特征之后,所述方法还包括:若不存有所述第一特征,则开启所述DDP模块。
在一种可能的设计中,在本申请实施例第一方面的第二种实现方式中,所述若不存有所述第一特征,则开启所述DDP模块之后,所述方法还包括:通过DDP率统计模块获取所述DDP率;将所述第一特征、所述DDP率以及所述第一特征和所述DDP率的对应关系存储至所述特征库中。
在一种可能的设计中,在本申请实施例第一方面的第三种实现方式中,所述获取第一数据流之前,所述方法还包括:构建所述特征库。
在一种可能的设计中,在本申请实施例第一方面的第四种实现方式中,所述构建所述特征库包括:获取数据样本,所述数据样本为已知样本DDP率的数据;通过所述特征识别模块识别所述数据样本,得到样本特征;根据所述样本特征以及所述样本DDP率构建所述特征库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810543668.9/2.html,转载请声明来源钻瓜专利网。