[发明专利]基于文件目录的热迁移方法及装置有效
申请号: | 201611041877.0 | 申请日: | 2016-11-21 |
公开(公告)号: | CN106844417B | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 曾震 | 申请(专利权)人: | 深信服科技股份有限公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
地址: | 518052 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 文件 目录 迁移 方法 装置 | ||
1.一种基于文件目录的热迁移方法,应用于分布式文件系统,其特征在于,所述基于文件目录的热迁移方法包括:
创建待迁移文件目录下各文件的本地副本;
采用异步操作迁移数据,将所述本地副本中的第一部分数据从迁出端迁移到迁入端,并在数据迁移过程中对前台输入输出IO进行隔离;
当完成所述第一部分数据的迁移时,阻塞前台输入输出IO,并采用同步操作迁移数据,将所述本地副本中的第二部分数据从所述迁出端迁移到所述迁入端;
将所述待迁移文件目录下各文件的访问路径从所述迁出端切换到所述迁入端,其中,异步操作迁移的总数据量大于同步操作迁移的总数据量。
2.如权利要求1所述的基于文件目录的热迁移方法,其特征在于,采用后台主动创建与写时复制被动创建的并行创建方式,对所述待迁移文件目录下各文件进行全量快照,以创建对应的本地副本;
其中,在所述后台主动创建方式下,若所述待迁移文件目录所在磁盘的读写输入输出IO队列由非空变换为空,则启动进行所述本地副本的创建,若该磁盘的读写输入输出IO队列由空变换为非空,则暂停进行所述本地副本的创建;
在所述写时复制被动创建方式下,若前台输入输出IO对未创建本地副本的文件进行读写,则在该文件被修改之前,完成该文件的本地副本的创建。
3.如权利要求1所述的基于文件目录的热迁移方法,其特征在于,所述在数据迁移过程中对前台输入输出IO进行隔离包括:
在数据迁移过程中,对前台输入输出IO队列进行监控;
若前台输入输出IO队列由非空变换为空,则启动进行数据迁移,若前台输入输出IO队列由空变换为非空,则暂停进行数据迁移。
4.如权利要求1所述的基于文件目录的热迁移方法,其特征在于,所述基于文件目录的热迁移方法还包括:
在采用异步操作迁移数据之前,将写操作的日志状态设置为异步记录日志状态,在采用同步操作迁移数据之前,将写操作的日志状态设置为同步记录日志状态。
5.如权利要求1至4中任一项所述的基于文件目录的热迁移方法,其特征在于,采用租约机制回收所述分布式文件系统的客户端写权限,以供阻塞前台输入输出IO。
6.一种基于文件目录的热迁移装置,应用于分布式文件系统,其特征在于,所述基于文件目录的热迁移装置包括:
创建模块,用于创建待迁移文件目录下各文件的本地副本;
异步迁移模块,用于采用异步操作迁移数据,将所述本地副本中的第一部分数据从迁出端迁移到迁入端,并在数据迁移过程中对前台输入输出IO进行隔离;
同步迁移模块,用于当完成所述第一部分数据的迁移时,阻塞前台输入输出IO,并采用同步操作迁移数据,将所述本地副本中的第二部分数据从所述迁出端迁移到所述迁入端;
切换模块,用于将所述待迁移文件目录下各文件的访问路径从所述迁出端切换到所述迁入端,其中,异步操作迁移的总数据量大于同步操作迁移的总数据量。
7.如权利要求6所述的基于文件目录的热迁移装置,其特征在于,采用后台主动创建与写时复制被动创建的并行创建方式,对所述待迁移文件目录下各文件进行全量快照,以创建对应的本地副本;
其中,所述创建模块还用于:在所述后台主动创建方式下,若所述待迁移文件目录所在磁盘的读写输入输出IO队列由非空变换为空,则启动进行所述本地副本的创建,若该磁盘的读写输入输出IO队列由空变换为非空,则暂停进行所述本地副本的创建;在所述写时复制被动创建方式下,若前台输入输出IO对未创建本地副本的文件进行读写,则在该文件被修改之前,完成该文件的本地副本的创建。
8.如权利要求6所述的基于文件目录的热迁移装置,其特征在于,所述异步迁移模块还用于:
在数据迁移过程中,对前台输入输出IO队列进行监控;
若前台输入输出IO队列由非空变换为空,则启动进行数据迁移,若前台输入输出IO队列由空变换为非空,则暂停进行数据迁移。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611041877.0/1.html,转载请声明来源钻瓜专利网。