[发明专利]数据写入、读取方法及装置、云存储系统有效
申请号: | 201610088973.4 | 申请日: | 2016-02-17 |
公开(公告)号: | CN107092437B | 公开(公告)日: | 2019-11-22 |
发明(设计)人: | 金平;林起芊 | 申请(专利权)人: | 杭州海康威视数字技术股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;H04L29/08 |
代理公司: | 11413 北京柏杉松知识产权代理事务所(普通合伙) | 代理人: | 马敬;项京<国际申请>=<国际公布>=< |
地址: | 310052 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 写入 读取 方法 装置 存储系统 | ||
本发明实施例提供了一种数据写入、读取方法及装置、云存储系统,所述数据写入方法包括:接入节点接收数据写入请求;当无法获取到可用管理节点时,识别所述数据写入请求中包含的域标识信息,并根据所述域标识信息,查询预先保存的索引,其中,所述索引包含资源池与域标识信息的对应关系;识别与所述域标识信息匹配的目标资源池,其中,每个资源池中包含至少一个存储服务器;从所述目标资源池中包含的至少一个存储服务器中,确定其中一个存储服务器为目标存储服务器,并将待写入数据写入所述目标存储服务器。本实施方式能够保证在全部管理节点出现故障或管理节点集群网络异常时,云存储系统仍能正常运行,且不需要增加额外的成本。
技术领域
本发明涉及数据处理技术领域,特别是涉及一种数据写入、读取方法及装置、云存储系统。
背景技术
云存储是在云计算(cloud computing)概念上延伸和发展出来的一个新的概念,是一种新兴的网络存储技术,是指通过集群应用、网络技术或分布式文件系统等功能,将网络中各种不同类型的大量存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的一个系统。
云存储系统是一个主从架构的分布式系统,主节点也就是管理节点在整个系统的正常运行中起到至关重要的作用。管理节点一旦出现故障,整个系统的所有业务都不能正常进行。例如,当云存储系统中的接入节点接收到一个数据写入请求时,接入节点需要将该数据写入请求发送给管理节点,以使管理节点为该数据写入请求分配对应的存储服务器。
然而,当管理节点出现故障时,管理节点将不会对接入节点发送的数据处理请求作出响应,因此,该数据处理将会失败。
以图1所示的视频云存储系统的架构为例对无法获取到可用管理节点时相应处理流程进行说明,当无法获取到可用视频云存储管理节点(CVM,Cloud Video Manage)130时,视频云存储管理节点130将不会对视频云存储接入节点(CVA,Cloud Video Access)120发送的数据处理请求作出响应,因此,视频云存储接入节点120将不会收到视频云存储管理节点130为该数据处理请求分配的视频云存储存储服务器(CVS,Cloud Video Storage)140,该数据处理将会失败。对于与上述视频云存储系统相似的其他云存储系统也同样存在上述问题。
因此,云存储系统在实际运用中,遇到管理节点出现故障导致云存储系统无法提供服务时,可能会造成数据的丢失或者数据无法读取,给用户造成重大损失。
现有技术中,为了保证云存储系统的稳定,主要方法是增加管理节点的数量,并通过HA(High Available,高可用性集群)或者集群技术保证部分管理节点故障时由正常的管理节点接管继续提供服务,或者添加备用管理节点来代替故障管理节点提供服务。但是,增加管理节点或者添加备用管理节点会增加项目成本,而且,增加管理节点或者添加备用管理节点也只能保证部分管理节点故障时云存储系统正常运行,而无法保证所有的管理节点都出现故障或管理节点集群网络异常的情况下云存储系统正常运行。
发明内容
本发明实施例的目的在于提供一种数据写入、读取方法及装置、云存储系统,以在全部管理节点出现故障或管理节点集群网络异常时,云存储系统仍能正常运行,且不需要增加额外的成本。具体技术方案如下:
第一方面,本发明实施例提供了一种基于云存储系统的数据写入方法,所述云存储系统至少包括:接入节点、至少一个管理节点以及至少一个存储服务器,所述方法包括:
所述接入节点接收数据写入请求;
当无法获取到可用管理节点时,识别所述数据写入请求中包含的域标识信息,并根据所述域标识信息,查询预先保存的索引,其中,所述索引包含资源池与域标识信息的对应关系;
识别与所述域标识信息匹配的目标资源池,其中,每个资源池中包含至少一个存储服务器;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610088973.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置