[发明专利]一种集群存储数据在线迁移的方法及系统在审
| 申请号: | 202011370037.5 | 申请日: | 2020-11-30 |
| 公开(公告)号: | CN112667148A | 公开(公告)日: | 2021-04-16 |
| 发明(设计)人: | 许式伟 | 申请(专利权)人: | 上海七牛信息技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 林晓青 |
| 地址: | 201203 上海市浦东新区中*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 集群 存储 数据 在线 迁移 方法 系统 | ||
本发明公开一种集群存储数据在线迁移的方法,应用存储系统中,所述的存储系统包括源存储空间和目标存储空间,该方法包括:根据源存储空间的大小和目标存储空间的大小获得本次迁移数据量,根据本次迁移数据量生成数据迁移指令,目标存储空间依据指令将源存储空间中的数据迁移到目标存储空间,将源存储空间内迁移完成的数据所在的磁盘移除,添加到所述目标存储空间的空闲空间中,循环执行步骤S1至S3,直到源存储空间的数据全部迁移到目标存储空间。本发明还公开一种集群存储数据在线迁移的系统,通过本发明所述的方法和系统,节约了数据在线迁移过程中对存储空间的消耗,降低了数据迁移成本,因此具有明显的技术优势和有益效果。
技术领域
本发明涉及数据迁移领域,尤其涉及一种集群存储数据在线迁移的方法及系统。
背景技术
在集群存储设备的使用过程中,由于业务数据量的不断增加,旧集群由于多种原因无法继续写数据(物理设备数量限制,软件系统不能满足功能、可靠性、可用性需求,等等…),这种情况下,需要将旧的集群存储设备中的数据迁移到新的存储系统内,并且将旧存储设备中的数据无缝迁移到新的存储中,以保证集群存储设备后续持续正常使用。
在现有技术中,为了确保迁移过程中成功迁移所有的数据,通常的做法是提供对等存储空间的存储集群,将数据对等进行拷贝,例如要迁移10G的文件,则需要准备有10G的存储空间用来拷贝数据,发明人发现上述现有技术方案对存储空间的消耗较为严重,数据在线迁移的过程中,需要同时占用2倍的存储空间,因此如何在确保对集群存储数据高可靠在线迁移时,降低存储成本是该领域亟需解决的问题。
发明内容
本发明的目的在于克服现有技术中存在的上述缺陷,提供一种集群存储数据在线迁移的方法,用于解决现有技术中存在的存储成本高的缺陷。
为达到上述目的,本发明第一方面公开一种集群存储数据在线迁移的方法,应用存储系统中,所述的存储系统包括源存储空间和目标存储空间,该方法包括步骤:S1:根据源存储空间的大小和目标存储空间的大小获得本次迁移数据量;S2:根据本次迁移数据量生成数据迁移指令,等待所述的源存储空间依据指令将数据迁移到目标存储空间;S3:将源存储空间内迁移完成的数据所在的磁盘移除,添加到所述目标存储空间的空闲空间中;S4:循环执行步骤S1至S3,直到源存储空间的数据全部迁移到目标存储空间。
进一步的,在步骤S1中,所述的获得本次迁移数据量的具体计算方法为:
M=MdMA?MA:min(Md,min(Man))
其中,M为本次迁移数据量,集合A{D1,D2,D3,D4……Dn}为源存储空间,其待迁移数据总量为MA,集合A包括n个待迁移数据磁盘{D1,D2,D3,D4……Dn},每个数据磁盘Dn的空间为Man,目标存储空间的空闲空间为Md。
进一步的,所述的目标存储空间的初始空闲空间Md不小于max(Man)。
进一步的,所述的源存储空间按物理磁盘数据量从大到小的顺序迁移数据。
进一步的,在步骤S1之前还包括以下步骤:设置在线迁移状态标识为开启状态。
进一步的,所述的步骤S1还包括:在步骤S1之前还包括:还包括设置在线迁移时数据存储的API接口为目标存储空间的API接口。
进一步的,所述的步骤S1还包括:设置所述的源存储空间为只读状态。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011370037.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于星敏感器的MEMS陀螺零偏在轨简化工程计算方法
- 下一篇:烟草加香机
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





