[发明专利]数据存储方法、系统、数据节点和计算机可读存储介质在审
| 申请号: | 201910515344.9 | 申请日: | 2019-06-14 |
| 公开(公告)号: | CN111782135A | 公开(公告)日: | 2020-10-16 |
| 发明(设计)人: | 刘洪通 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/10 |
| 代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 孙玉;许蓓 |
| 地址: | 100086 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 存储 方法 系统 节点 计算机 可读 介质 | ||
1.一种数据存储方法,包括:
数据节点接收客户端发送的待写入的数据包;
所述数据节点为所述待写入的数据包分配一个磁盘阵列,所述磁盘阵列对应于多个磁盘;
所述数据节点根据所述待写入的数据包的大小,将所述待写入的数据包划分为多个数据片,并行地将各个数据片分别写入所述磁盘阵列对应的不同的磁盘中。
2.根据权利要求1所述的方法,其中,
所述磁盘阵列被划分为多个条带,每个条带中包含多个存储片,一个条带中不同的存储片分别属于不同的磁盘。
3.根据权利要求2所述的方法,其中,
所述数据节点根据所述待写入的数据包的大小,将所述待写入的数据包划分为多个数据片包括:
所述数据节点根据所述待写入的数据包的大小为所述待写入的数据包分配所述磁盘阵列中存储空间;
所述数据节点根据该存储空间对应的各个存储片的剩余空间,将所述待写入的数据包划分为多个数据片。
4.根据权利要求1所述的方法,其中,
所述并行地将各个数据片分别写入所述磁盘阵列中不同磁盘分区包括:
所述数据节点根据各个磁盘阵列的数据目录,向所述磁盘阵列发送所述数据片,以便并行地将各个数据片分别写入所述磁盘阵列对应的不同磁盘中;
其中,所述磁盘阵列的数据目录是将所述磁盘阵列格式化为本地文件系统后挂载到本地目录后生成的。
5.根据权利要求1所述的方法,还包括:
数据节点接收客户端针对待读取的数据包发送的数据读取请求;
所述数据节点根据数据目录查找所述待读取的数据块存储的磁盘阵列,根据所述磁盘阵列对应的文件系统,查找所述待读取的数据包对应的至少一个数据片存储的磁盘;
所述数据节点从各个存储的磁盘中并行读取所述待读取的数据包对应的各个数据片。
6.根据权利要求1所述的方法,还包括:
所述客户端接收管理节点发送的块组信息,所述块组中信息包括多个数据节点的地址信息;
所述客户端将待写入的数据划分为数据单元,并根据一组预设数量的数据单元计算对应的校验单元;
所述客户端根据各个数据节点的地址信息将所述数据单元和所述校验单元的数据分别以待写入的数据包的形式发送至各个数据节点。
7.一种数据节点,包括:
数据包接收模块,用于接收客户端发送的待写入的数据包;
磁盘阵列确定模块,用于为所述待写入的数据包分配一个磁盘阵列,所述磁盘阵列对应于多个磁盘;
数据写入模块,用于根据所述待写入的数据包的大小,将所述待写入的数据包划分为多个数据片,并行地将各个数据片分别写入所述磁盘阵列对应的不同的磁盘中。
8.根据权利要求7所述的数据节点,其中,
所述磁盘阵列被划分为多个条带,每个条带中包含多个存储片,一个条带中不同的存储片分别属于不同的磁盘。
9.根据权利要求8所述的数据节点,其中,
所述数据写入模块用于根据所述待写入的数据包的大小为所述待写入的数据包分配所述磁盘阵列中存储空间;根据该存储空间对应的各个存储片的剩余空间,将所述待写入的数据包划分为多个数据片。
10.根据权利要求7所述的数据节点,其中,
所述数据写入模块用于根据各个磁盘阵列的数据目录,向所述磁盘阵列发送所述数据片,以便并行地将各个数据片分别写入所述磁盘阵列对应的不同磁盘中;
其中,所述磁盘阵列的数据目录是将所述磁盘阵列格式化为本地文件系统后挂载到本地目录后生成的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910515344.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





