[发明专利]分布式数据镜像方法及存储数据节点有效
申请号: | 201110447809.5 | 申请日: | 2011-12-28 |
公开(公告)号: | CN103186554B | 公开(公告)日: | 2016-11-23 |
发明(设计)人: | 段兵;朱国云 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京亿腾知识产权代理事务所 11309 | 代理人: | 陈霁 |
地址: | 开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 数据 方法 存储 节点 | ||
1.一种分布式数据镜像方法,其特征在于,包括以下步骤:
接收数据操作请求,对数据进行所述数据操作请求所对应的操作,且对所述数据进行所述数据操作请求相应的备份操作,并生成所述数据的逻辑文件名,其中,所述逻辑文件名包括文件区域信息;
生成包括所述数据的逻辑文件名、镜像策略和操作类型的镜像记录;
向所述文件区域信息确定的镜像目的分布式文件系统的主控节点,获取待镜像的目的数据存储节点地址的列表;
按照所述镜像策略,根据所述镜像记录中的所述操作类型,对所述数据,在所述列表中的所述目的数据存储节点地址所对应的目的数据存储节点上,进行所述数据操作请求相应的操作。
2.根据权利要求1所述的一种分布式数据镜像方法,其特征在于,在所述生成包括所述数据的逻辑文件名、镜像策略和操作类型的镜像记录之后,所述向所述文件区域信息确定的镜像目的分布式文件系统的主控节点,获取待镜像的目的数据存储节点地址的列表之前;还包括:
根据所述文件区域信息解析出存储所述数据的数据块的数据块号,判断所述数据块号是否属于镜像数据区域内;如属于,则执行所述向所述文件区域信息确定的镜像目的分布式文件系统的主控节点,获取待镜像的目的数据存储节点地址的列表。
3.根据权利要求1或2所述的一种分布式数据镜像方法,其特征在于,在所述接收数据操作请求,将数据进行所述数据操作请求所对应的操作,并生成所述数据的逻辑文件名之前,还包括;
所述存储数据节点所在的分布式文件系统中的主控节点接收用户通过客户端输入的对所述数据的进行操作的信息;
所述主控节点根据所述输入的信息向所述客户端返回存储数据节点地址列表;
用户通过所述客户端从存储数据节点地址列表中选择所述存储数据节点。
4.根据权利要求1所述的一种分布式数据镜像方法,其特征在于,当所述数据操作请求为数据存储请求时,则所述操作类型为存储操作;当所述镜像策略为同步镜像时,所述向所述文件区域信息确定的镜像目的分布式文件系统的主控节点,获取待镜像的目的数据存储节点地址列表之后,和所述按照所述镜像策略,根据所述镜像记录中的所述操作类型,对所述数据在所述目的数据存储节点地址所对应的目的数据存储节点上进行所述数据操作请求相应的操作之前,还包括:
根据所述逻辑文件名中的文件区域信息获取所述数据。
5.根据权利要求4所述的一种分布式数据镜像方法,其特征在于,所述按照所述镜像策略,根据所述镜像记录中的所述操作类型,对所述数据在所述目的数据存储节点地址所对应的目的数据存储节点上进行操作,包括:
从所述目的数据存储节点地址列表中选择一个目的数据存储节点地址,将所述数据写入所述选择的目的数据存储节点地址对应的目的数据存储节点;
所述选择的所述目的数据存储节点,向所述目的数据存储节点地址列表中、剩余目的数据存储节点地址所对应的目的数据存储节点转发所述数据;
所述剩余目的数据存储节点地址所对应的目的数据存储节点存储所述数据。
6.根据权利要求1所述的一种分布式数据镜像方法,其特征在于,当所述操作类型为删除时,所述按照所述镜像策略,根据所述镜像记录中的所述操作类型,对所述数据在所述目的数据存储节点地址所对应的目的数据存储节点上进行操作,包括:
从所述目的数据存储节点地址列表中选择一个目的数据存储节点地址,所述选择的目的数据存储节点地址对应的目的数据存储节点删除该数据;
所述选择的所述目的数据存储节点,向所述目的数据存储节点地址列表中、剩余目的数据存储节点地址所对应的目的数据存储节点转发所述删除数据请求;
所述剩余目的数据存储节点地址所对应的目的数据存储节点删除所述数据。
7.根据权利要求5或6所述的一种分布式数据镜像方法,其特征在于,所述向所述文件区域信息确定的镜像目的分布式文件系统的主控节点,获取待镜像的目的数据存储节点地址之前,和生成包括所述数据的逻辑文件名、镜像策略和操作类型的镜像记录之后,还包括:
判断所述镜像策略是否为异步策略,如果是异步策略,则执行:
将所述镜像记录推送进文件队列中;
查看所述文件队列中的镜像记录,从所述文件队列中按顺序取出所述镜像记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110447809.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:闭式蓄冰空调热泵装置
- 下一篇:一种盐岩地层异形套管设计方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置