[发明专利]存储数据重写方法、装置、服务器及存储介质有效
申请号: | 201811407789.7 | 申请日: | 2018-11-23 |
公开(公告)号: | CN109491620B | 公开(公告)日: | 2020-08-14 |
发明(设计)人: | 龚立义;孟军 | 申请(专利权)人: | 柏科数据技术(深圳)股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 潘登 |
地址: | 518057 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 数据 重写 方法 装置 服务器 介质 | ||
本发明实施例公开了一种存储数据重写方法、装置、服务器及存储介质。该方法包括:将存储数据缓存于缓存数据表中;根据重写数据的起始存储地址和长度,得到未重写数据的存储地址范围;根据所述未重写数据的存储地址范围,从缓存数据表中查找未重写数据;将重写数据和未重写数据组合,存储至内存。通过将存储数据缓存值缓存数据表中,从缓存数据表中查询得到未重写数据,并与重写数据进行组合,进行编码得到新的校验块数据,并重新将组合数据和校验块数据存储至内存,而不需要从存储内存中读取未重写数据,降低了I/O操作的工作量,提高了处理效率。
技术领域
本发明实施例涉及数据存储技术领域,尤其涉及一种存储数据重写方法、装置、服务器及存储介质。
背景技术
纠删码(erasure coding,EC)是一种存储数据保护方法,它将存储数据分割成片段,把存储数据进行编码,并将其存储在不同的位置,比如磁盘、存储节点或者其它地理位置。其基本思想是将存储数据分为n块存储数据,通过编码,得到m块校验块。对于这n+m块的数据块,当其中任意的原始数据块和/或校验块出错时,均可以通过解码算法恢复出原来的n块数据。基于纠删码的方法磁盘利用率为n/(n+m),具有冗余度低、磁盘利用率高等优点。
若存储数据需要修改重写,但是一次写操作的偏移和长度没有对齐EC组,就需要部分更新EC组,将此类操作称为部分写。目前部分写的处理方法为将不需要更新的数据块读出来,跟新数据组合在一起,然后再整体编码并写入。但是这种方法增加了系统I/O操作的工作量,降低了处理效率。
发明内容
本发明实施例提供一种存储数据重写方法、装置、服务器及存储介质,以减少存储数据重写的I/O工作量,提高处理效率。
第一方面,本发明实施例提供了一种存储数据重写方法,该方法包括:
将存储数据缓存于缓存数据表中;
根据重写数据的起始存储地址和长度,得到未重写数据的存储地址范围;
根据所述未重写数据的存储地址范围,从缓存数据表中查找未重写数据;
将重写数据和未重写数据组合,存储至内存。
第二方面,本发明实施例还提供了一种存储数据重写装置,该装置包括:
缓存模块,用于将存储数据缓存于缓存数据表中;
范围获取模块,用于根据重写数据的起始存储地址和长度,得到未重写数据的存储地址范围;
查找模块,用于根据所述未重写数据的存储地址范围,从缓存数据表中查找未重写数据;
组合模块,用于将重写数据和未重写数据组合,存储至内存。
第三方面,本发明实施例还提供了一种服务器,该服务器包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例中的任一种存储数据重写方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例中的任一种存储数据重写方法。
本发明实施例通过将存储数据缓存至缓存数据表中,从缓存数据表中查询得到未重写数据,并与重写数据进行组合,重新编码存储至内存,而不需要从存储内存中读取未重写数据,降低了I/O操作的工作量,提高了处理效率。
附图说明
图1是本发明实施例一中的一种存储数据重写方法的流程图;
图2a是本发明实施例二中的一种存储数据重写方法的具体实现示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于柏科数据技术(深圳)股份有限公司,未经柏科数据技术(深圳)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811407789.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置