[发明专利]一种对象拷贝方法、装置、设备及存储介质在审
| 申请号: | 202110981471.5 | 申请日: | 2021-08-25 |
| 公开(公告)号: | CN113806107A | 公开(公告)日: | 2021-12-17 |
| 发明(设计)人: | 武模仁;李欢欢;任磊;何文龙 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
| 主分类号: | G06F9/54 | 分类号: | G06F9/54 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 侯珊 |
| 地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 对象 拷贝 方法 装置 设备 存储 介质 | ||
本发明公开了一种对象拷贝方法、装置、设备及存储介质;在本方案中,查找待拷贝的目标对象后,先将目标对象的目标元数据拷贝至内存,将内存中的目标元数据写入拷贝的目的位置,并利用目标元数据在目的位置下创建软连接,以便在目的位置下通过软连接访问目标对象的真正数据;在满足真正数据拷贝条件后,根据目标元数据将目标对象的真正数据拷贝至内存,并将内存中的真正数据写入目的位置。可见,本方案进行对象拷贝时,可暂时不将目标对象的真正数据进行拷贝,从而避免出现内存暴涨、IO过大的问题,并且通过创建软连接,还可以保证目标对象的正常访问,提高了对象的拷贝效率,为用户带来了良好的使用体验。
技术领域
本发明涉及对象拷贝技术领域,更具体地说,涉及一种对象拷贝方法、装置、设备及存储介质。
背景技术
分布式对象存储系统指的是针对非结构化数据对象的分布式存储系统,当前的分布式对象存储系统中,已经实现对象间的拷贝操作,该拷贝操作具体可以为:将一个对象从一个桶拷贝到另一个桶中,或者将此对象从桶中的一个目录下拷贝到另一个目录下,也即:目前已经实现基本的拷贝功能。但是目前的拷贝流程比较复杂,目前的拷贝流程为:head请求,检查源桶内是否有此对象;get请求,将此对象下载到内存里面;put请求,将get到内存中的对象重新写入到新桶中。通过这种方式拷贝对象会在集群中增加很多IO(Input/Output,输入/输出),若是批量移动对象,则会出现内存暴涨的现象,从而影响客户前端业务,进而带来不好的用户体验,因此由拷贝产生的大批量IO对集群的性能以及稳定性是巨大的挑战。
发明内容
本发明的目的在于提供一种对象拷贝方法、装置、设备及存储介质,以在对象拷贝时,尽量避免出现内存暴涨、IO过大等问题。
为实现上述目的,本发明提供一种对象拷贝方法,包括:
查找待拷贝的目标对象;
将所述目标对象的目标元数据拷贝至内存;
将所述内存中的所述目标元数据写入拷贝的目的位置;
利用所述目标元数据在所述目的位置下创建软连接,以便在所述目的位置下通过所述软连接访问所述目标对象的真正数据;
在满足真正数据拷贝条件后,根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存,并将所述内存中的所述真正数据写入所述目的位置。
其中,所述查找待拷贝的目标对象之后,还包括:
检测数据访问请求量是否大于第一阈值;
若是,则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤;
若否,则将所述目标对象的目标元数据及真正数据均拷贝至内存,并将所述内存中的所述目标元数据及所述真正数据写入目的位置。
其中,所述查找待拷贝的目标对象之后,还包括:
检测数据拷贝请求量是否大于第二阈值;
若是,则继续执行所述将所述目标对象的目标元数据拷贝至内存的步骤;
若否,则将所述目标对象的目标元数据及真正数据均拷贝至内存,并将所述内存中的所述目标元数据及所述真正数据写入目的位置。
其中,所述目的位置为:与所述目标对象位于同一桶内的不同目录下,或者与所述目标对象位于不同桶的目录下。
其中,所述在满足真正数据拷贝条件后,根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存,并将所述内存中的所述真正数据写入所述目的位置,包括:
若检测到数据访问请求量不大于第一阈值,则根据所述目标元数据将所述目标对象的真正数据拷贝至所述内存;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110981471.5/2.html,转载请声明来源钻瓜专利网。





