[发明专利]存储系统中数据存储的方法、装置、设备及存储介质在审

专利信息
申请号: 201711139491.8 申请日: 2017-11-16
公开(公告)号: CN107908367A 公开(公告)日: 2018-04-13
发明(设计)人: 刘国枢 申请(专利权)人: 郑州云海信息技术有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 北京集佳知识产权代理有限公司11227 代理人: 罗满
地址: 450018 河南省郑州市*** 国省代码: 河南;41
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 存储系统 数据 存储 方法 装置 设备 介质
【说明书】:

技术领域

发明涉及分布式存储系统领域,特别是涉及一种存储系统中数据存储的方法、装置、设备及计算机可读存储介质。

背景技术

随着分布式存储系统中存储数据的数据量以指数级的速度增长,存储的需求量必然持续的增加,进而更大规模的存储系统也会增加。但是大规模的存储系统带来存储数据的功耗也随之增加。随着存储系统规模的迅猛增长,大型存储系统的功耗问题就变得日趋严重。

发明内容

本发明的目的是提供一种存储系统中数据存储的方法,解决了大型存储系统的功耗过大的问题,在保证存储系统的存储性能的基础上,降低功耗。

本发明的另一目的是提供一种存储系统中数据存储的装置、设备及计算机可读存储介质。

为解决上述技术问题,本发明提供一种存储系统中数据存储的方法,应用于CEPH分布式存储系统,包括:

实时接收待写入数据的请求;

根据各个所述待写入数据的日志记录,判断各个所述待写入数据中是否存在热数据;

如果是,则将所述热数据分配至热数据存储介质进行写入存储;

如果否,则将所述待写入数据分配至冷数据存储介质进行写入存储。

其中,所述根据各个所述待写入数据的日志记录,判断各个所述待写入数据中是否存在热数据包括:

当接收待写入数据的请求的数量达到预设数量阈值时,查询日志记录中各个待写入数据被访问的记录;

根据各个所述待写入数据在第一预设时间段内被访问的次数,判断各个所述待写入数据是否存在被访问次数达到第一预设次数阈值的热数据。

其中,在根据各个所述待写入数据的日志记录,判断各个所述待写入数据中是否存在热数据之后,还包括:

判断第二预设时间段内,所述待写入数据中热数据所占的比例是否超过预设比例阈值,如果是,则调整所述第一预设次数阈值为第二预设次数阈值,所述第二预设次数阈值大于所述第一预设次数阈值。

其中,所述将所述热数据分配至热数据存储介质进行写入存储包括:

判断多个所述热数据中是否存在属于同一文件的数据,如果是,则将属于同一文件的所述热数据分配至多个不同的热数据存储介质进行写入存储。

其中,所述将所述热数据分配至热数据存储介质进行写入存储包括:

将多个所述热数据通过Hash运算分配至多个不同的热数据存储介质。

本发明还提供一种存储系统中数据存储的装置,应用于CEPH分布式存储系统,包括:

接收模块,用于实时接收待写入数据的信息;

判断模块,用于根据各个所述待写入数据的日志记录判断各个所述待写入数据中是否存在热数据;

分配模块,用于如果各个所述待写入数据中存在热数据,则将所述热数据分配至热数据存储介质进行存储,如果各个所述待写入数据中不存在热数据,则将所述待写入数据分配至冷数据存储介质进行存储。

其中,所述判断模块用于当接收到待写入数据的信息的数量达到预设数量阈值时,查询各个待写入数据的日志记录,根据各个所述待写入数据在第一预设时间段内被访问的次数,判断各个所述待写入数据是否存在被访问次数达到预设次数阈值的热数据。

其中,所述分配模块用于判断多个所述热数据中是否存在属于同一文件的数据,如果是,则将属于同一文件的所述热数据分配至多个不同的热数据存储介质进行写入存储。

本发明还提供一种存储系统中数据存储的设备,应用于CEPH分布式存储系统,包括:

存储器,用于存储数据存储程序;

处理器,用于执行所述数据存储程序时实现如上任一项所述数据存储方法的步骤。

本发明还提供一种计算机可读存储介质,应用于CEPH分布式存储系统,所述计算机可读存储介质上存储有数据存储程序,所述数据存储程序被处理器执行时实现如上任一项所述数据存储方法的步骤。

本发明所提供的存储系统中数据存储的方法,应用于CEPH分布式存储系统,通过将待写入的数据进行冷热数据的划分,将热数据优先采用高能耗处理数据速度更快的处理器和高速存储介质,反之,将冷数据优先采用低能耗处理数据速度更慢的处理器和低速存储介质。进而对存储介质进行了合理化的分配,使得被更频繁访问的数据能够快速的存储,从而保证了整个存储系统的存储性能,而相对访问频率较低的数据,可以降低存储速度,对数据的访问影响也不大,但是却能够在极大程度上减小整个存储系统的耗能。本发明所采用的数据存储的方法,在保证整个系统的性能的基础上,在极大程度上降低了能耗。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201711139491.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top