[发明专利]一种对象存储方法、装置、设备及存储介质在审
| 申请号: | 202110741523.1 | 申请日: | 2021-06-30 |
| 公开(公告)号: | CN113625952A | 公开(公告)日: | 2021-11-09 |
| 发明(设计)人: | 陶桐桐;武模仁 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/901 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 薛娇 |
| 地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 对象 存储 方法 装置 设备 介质 | ||
本发明公开了一种对象存储方法、装置、设备及存储介质,该方法包括:确定对象存储服务中当前需写入对象的存储桶为当前桶,需写入当前桶的对象为当前对象;将当前对象写入至当前桶中,将当前对象的元数据信息写入至当前桶的桶索引分片上,并将对当前对象进行写入的操作日志信息写入至、与写入当前对象元数据信息的桶索引分片相对应的桶索引日志分片中,以供基于相应的元数据信息及操作日志信息实现当前对象的同步;桶索引分片与桶索引日志分片是一一对应的。可见,本申请不再将对象的操作日志信息写入到对象对应的桶索引分片中,而是单独桶索引日志分片中,从而通过这种方式使得桶索引分片变小,有效提高了数据同步的速度。
技术领域
本发明涉及对象存储技术领域,更具体地说,涉及一种对象存储方法、装置、设备及存储介质。
背景技术
在大数据时代,对象存储服务(Object Storage Service,OSS)是一种新兴的海量、安全、低成本、高可靠的云存储服务,适合存放非结构化的数据,例如:视频,图片,文档等。在异地容灾场景下,往往依赖于对象的操作日志信息,进行不同站点间的数据同步。所以针对对象存储服务中的存储桶实现对象的写操作时,不仅会在存储桶对应桶索引分片(bucket_index)上记录对象的元数据信息,同时需要在桶索引分片上记录对象的操作日志信息(bucket_index_log)信息,便于进行数据的同步。由于元数据信息及操作日志信息均需要存储至桶索引分片中,随着存储桶内对象越来越多,达到上亿级别,每个存储桶的桶索引分片上记录的元数据信息和操作日志信息就会越来越多,进而导致在实现同步时导致同步速度较慢。
发明内容
本发明的目的是提供一种对象存储方法、装置、设备及存储介质,能够有效提高数据同步的速度。
为了实现上述目的,本发明提供如下技术方案:
一种对象存储方法,包括:
如果需要向对象存储服务的任意存储桶中写入对象,则确定当前需写入对象的存储桶为当前桶,需写入当前桶的对象为当前对象;
将当前对象写入至当前桶中,将当前对象的元数据信息写入至当前桶的桶索引分片上,并将对当前对象进行写入的操作日志信息写入至、与写入当前对象元数据信息的桶索引分片相对应的桶索引日志分片中,以供基于相应的所述元数据信息及所述操作日志信息实现当前对象的同步;其中,所述桶索引分片与所述桶索引日志分片是一一对应的。
优选的,还包括:
如果需要对当前桶中的当前对象进行修改或者删除,则对相应桶索引分片中包含的当前对象的元数据信息进行对应的修改或者删除,并将对当前对象进行修改或者删除的操作日志信息写入至、包含有对当前对象进行写入的操作日志信息的桶索引日志分片中。
优选的,还包括:
判断所述对象存储服务是否为多站点场景,如果是,则执行将当前对象的操作日志信息写入至相应桶索引日志分片中的步骤,如果否,则确定无需将当前对象的操作日志信息写入至相应桶索引日志分片中。
优选的,基于相应的所述元数据信息及所述操作日志信息实现当前对象的同步之后,还包括:
将当前对象的操作日志信息从相应的桶索引日志分片中删除。
一种对象存储装置,包括:
确定模块,用于:如果需要向对象存储服务的任意存储桶中写入对象,则确定当前需写入对象的存储桶为当前桶,需写入当前桶的对象为当前对象;
写入模块,用于:将当前对象写入至当前桶中,将当前对象的元数据信息写入至当前桶的桶索引分片上,并将对当前对象进行写入的操作日志信息写入至、与写入当前对象元数据信息的桶索引分片相对应的桶索引日志分片中,以供基于相应的所述元数据信息及所述操作日志信息实现当前对象的同步;其中,所述桶索引分片与所述桶索引日志分片是一一对应的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110741523.1/2.html,转载请声明来源钻瓜专利网。





