[发明专利]一种数据读写方法、装置、电子设备及介质在审
申请号: | 201910580273.0 | 申请日: | 2019-06-28 |
公开(公告)号: | CN112148206A | 公开(公告)日: | 2020-12-29 |
发明(设计)人: | 杨稼晟;姚国涛 | 申请(专利权)人: | 北京金山云网络技术有限公司;北京金山云科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 马敬;项京 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 读写 方法 装置 电子设备 介质 | ||
本发明实施例提供了一种数据读写方法、装置、电子设备及介质,涉及计算机技术领域,可以缩短读写操作的路径,减少读写操作消耗的时间,从而减少由于读写操作消耗的时间过长而导致读写操作失败的情况发生。本发明的实施例包括:根据虚拟磁盘中,用于存储待读写数据的存储位置,确定虚拟磁盘中,用于存储待读写数据的分片,虚拟磁盘中包括多个分片,每个分片用于存储指定大小的数据。然后确定用于存储待读写数据的分片映射的虚拟节点,虚拟节点对应存储集群中预设数量的服务器。再向虚拟节点对应的服务器发送输入/输出I/O请求,I/O请求用于请求从存储位置处读写待读写数据。
技术领域
本发明涉及计算机技术领域,特别是涉及一种数据读写方法、装置、电子设备及介质。
背景技术
相关技术中,数据的存储形式包括:本地存储和分布式存储。本地存储是指任何读写操作都不经过网络,仅在本地磁盘中进行。由于本地存储的读写操作都是在本地磁盘中进行,所以本地存储的磁盘容量有限,而且使用本地存储的服务器若发生宕机,则无法执行读写操作。为了解决上述问题,出现了分布式存储。
分布式存储指的是:存储系统中包括各元数据节点和各存储节点,元数据节点用于存储文件或数据块的元数据信息,任何读写操作都要先经过元数据节点,以获取到存储数据块或文件的设备标识、磁盘标识和偏移地址等,然后再向获取的设备标识对应的数据存储服务器发送读写请求,进行相应的读写操作。
但是,在分布式存储系统中,由于每次进行读写操作,都要先经过元数据节点,使得读写操作的执行路径较长,消耗时间较长,甚至导致读写操作失败。例如:若网络出现抖动,网络中各终端的读写请求会发生排队现象,而排队产生的延迟会影响客户端到服务器端的传输的数据延迟,容易导致读写请求失败。
发明内容
本发明实施例的目的在于提供一种数据读写方法、装置、电子设备及介质,以实现缩短读写操作的路径,减少读写操作消耗的时间,从而减少由于读写操作消耗的时间过长而导致读写操作失败的情况发生。具体技术方案如下:
第一方面,提供了一种数据读写方法,应用于终端,所述方法包括:
根据虚拟磁盘中,用于存储待读写数据的存储位置,确定所述虚拟磁盘中,用于存储所述待读写数据的分片,所述虚拟磁盘中包括多个分片,每个分片用于存储指定大小的数据;
确定用于存储所述待读写数据的分片映射的虚拟节点,所述虚拟节点对应存储集群中预设数量的服务器;
向所述虚拟节点对应的服务器发送输入/输出I/O请求,所述I/O请求用于请求从所述存储位置处读写所述待读写数据。
可选的,在所述根据虚拟磁盘中,用于存储待读写数据的存储位置,确定所述虚拟磁盘中,用于存储所述待读写数据的分片之前,还包括:
获取虚拟节点列表,所述虚拟节点列表中包括各虚拟节点对应的硬盘标识,以及硬盘所属的服务器互联网协议IP地址。
可选的,所述获取虚拟节点列表,包括:
向指定服务器发送获取请求,所述获取请求用于请求获取所述虚拟节点列表;
接收所述虚拟节点列表,并与发送所述虚拟节点列表的服务器建立长连接。
可选的,所述根据虚拟磁盘中,用于存储待读写数据的存储位置,确定所述虚拟磁盘中,用于存储所述待读写数据的分片,包括:
根据所述虚拟磁盘中,用于存储所述待读写数据的起始存储位置和所述虚拟磁盘中各分片的大小,确定所述待读写数据对应的起始分片;
根据所述起始分片和所述待读写数据的大小,确定所述待读写数据对应的结尾分片,并将所述起始分片、所述结尾分片和所述起始分片与所述结尾分片之间的分片确定为用于存储所述待读写数据的分片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910580273.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置