[发明专利]一种集群存储数据在线迁移的方法及系统在审

专利信息
申请号: 202011370037.5 申请日: 2020-11-30
公开(公告)号: CN112667148A 公开(公告)日: 2021-04-16
发明(设计)人: 许式伟 申请(专利权)人: 上海七牛信息技术有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 上海硕力知识产权代理事务所(普通合伙) 31251 代理人: 林晓青
地址: 201203 上海市浦东新区中*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 集群 存储 数据 在线 迁移 方法 系统
【说明书】:

发明公开一种集群存储数据在线迁移的方法,应用存储系统中,所述的存储系统包括源存储空间和目标存储空间,该方法包括:根据源存储空间的大小和目标存储空间的大小获得本次迁移数据量,根据本次迁移数据量生成数据迁移指令,目标存储空间依据指令将源存储空间中的数据迁移到目标存储空间,将源存储空间内迁移完成的数据所在的磁盘移除,添加到所述目标存储空间的空闲空间中,循环执行步骤S1至S3,直到源存储空间的数据全部迁移到目标存储空间。本发明还公开一种集群存储数据在线迁移的系统,通过本发明所述的方法和系统,节约了数据在线迁移过程中对存储空间的消耗,降低了数据迁移成本,因此具有明显的技术优势和有益效果。

技术领域

本发明涉及数据迁移领域,尤其涉及一种集群存储数据在线迁移的方法及系统。

背景技术

在集群存储设备的使用过程中,由于业务数据量的不断增加,旧集群由于多种原因无法继续写数据(物理设备数量限制,软件系统不能满足功能、可靠性、可用性需求,等等…),这种情况下,需要将旧的集群存储设备中的数据迁移到新的存储系统内,并且将旧存储设备中的数据无缝迁移到新的存储中,以保证集群存储设备后续持续正常使用。

在现有技术中,为了确保迁移过程中成功迁移所有的数据,通常的做法是提供对等存储空间的存储集群,将数据对等进行拷贝,例如要迁移10G的文件,则需要准备有10G的存储空间用来拷贝数据,发明人发现上述现有技术方案对存储空间的消耗较为严重,数据在线迁移的过程中,需要同时占用2倍的存储空间,因此如何在确保对集群存储数据高可靠在线迁移时,降低存储成本是该领域亟需解决的问题。

发明内容

本发明的目的在于克服现有技术中存在的上述缺陷,提供一种集群存储数据在线迁移的方法,用于解决现有技术中存在的存储成本高的缺陷。

为达到上述目的,本发明第一方面公开一种集群存储数据在线迁移的方法,应用存储系统中,所述的存储系统包括源存储空间和目标存储空间,该方法包括步骤:S1:根据源存储空间的大小和目标存储空间的大小获得本次迁移数据量;S2:根据本次迁移数据量生成数据迁移指令,等待所述的源存储空间依据指令将数据迁移到目标存储空间;S3:将源存储空间内迁移完成的数据所在的磁盘移除,添加到所述目标存储空间的空闲空间中;S4:循环执行步骤S1至S3,直到源存储空间的数据全部迁移到目标存储空间。

进一步的,在步骤S1中,所述的获得本次迁移数据量的具体计算方法为:

M=MdMA?MA:min(Md,min(Man))

其中,M为本次迁移数据量,集合A{D1,D2,D3,D4……Dn}为源存储空间,其待迁移数据总量为MA,集合A包括n个待迁移数据磁盘{D1,D2,D3,D4……Dn},每个数据磁盘Dn的空间为Man,目标存储空间的空闲空间为Md

进一步的,所述的目标存储空间的初始空闲空间Md不小于max(Man)。

进一步的,所述的源存储空间按物理磁盘数据量从大到小的顺序迁移数据。

进一步的,在步骤S1之前还包括以下步骤:设置在线迁移状态标识为开启状态。

进一步的,所述的步骤S1还包括:在步骤S1之前还包括:还包括设置在线迁移时数据存储的API接口为目标存储空间的API接口。

进一步的,所述的步骤S1还包括:设置所述的源存储空间为只读状态。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011370037.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top