[发明专利]应用于分布式存储系统的存储方法、装置、设备及介质在审
申请号: | 202111587589.6 | 申请日: | 2021-12-23 |
公开(公告)号: | CN114281260A | 公开(公告)日: | 2022-04-05 |
发明(设计)人: | 戴磊;冯月;王俊 | 申请(专利权)人: | 广州炒米信息科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 广东勰思律师事务所 44609 | 代理人: | 刘兴彬 |
地址: | 510000 广东省广州市黄埔*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 应用于 分布式 存储系统 存储 方法 装置 设备 介质 | ||
本发明提供了一种应用于分布式存储系统的存储方法、装置、设备及介质。该方法包括:根据存储请求获取每个目标数据的内容信息,确定每个目标数据的权重值;遍历当前分布式存储系统的所有计算机节点,根据预设筛选规则对所有计算机节点进行筛选,得到多个目标计算机节点;获取每个目标计算机节点的历史存储记录,根据每个目标计算机节点的历史存储记录对每个目标计算机节点进行评估,得到每个目标计算机节点的评估值;根据每个目标数据的权重值为每个目标数据分配相应评估值的目标计算机节点,将每个目标数据存储至相应评估值的目标计算机节点中,以实现精细化分配,从而合理、均衡地分配数据,确保分布式存储系统的数据存储的正常运行。
技术领域
本发明涉及数据存储技术领域,尤其涉及一种应用于分布式存储系统的存储方法、装置、设备及介质。
背景技术
分布式存储系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。
在目前的分布式存储系统中,还处于粗放式分配数据,无法合理、均衡地分配数据,容易导致某个计算机节点存储的数据量较大,影响数据存储的正常运行。
发明内容
本发明提供一种应用于分布式存储系统的存储方法、装置、设备及介质,以合理、均衡地分配数据,确保分布式存储系统的数据存储的正常运行。
第一方面,本发明提供了一种应用于分布式存储系统的存储方法,包括如下步骤:
接收对多个目标数据的存储请求,根据每个所述目标数据的存储请求获取每个所述目标数据的内容信息;
根据每个所述目标数据的内容信息确定每个所述目标数据的权重值;其中,所述权重值用于评估所述目标数据的重要性;
遍历当前分布式存储系统的所有计算机节点,根据预设筛选规则对所述所有计算机节点进行筛选,得到多个目标计算机节点;
获取每个所述目标计算机节点的历史存储记录;
根据每个所述目标计算机节点的所述历史存储记录对每个所述目标计算机节点进行评估,得到每个所述目标计算机节点的评估值;
根据每个所述目标数据的权重值为每个所述目标数据分配相应评估值的目标计算机节点,将每个所述目标数据存储至相应评估值的目标计算机节点中。
优选地,所述根据每个所述目标数据的内容信息确定每个所述目标数据的权重值的步骤,包括:
从每个所述目标数据的内容信息中对应提取每个所述目标数据的历史泄露频率或被访问频率;
根据每个所述目标数据的历史泄露频率或被访问频率确定每个所述目标数据的权重值;其中,所述权重值与所述历史泄露频率成反比,所述权重值与所述被访问频率成正比。
优选地,所述根据预设筛选规则对所述所有计算机节点进行筛选,得到多个目标计算机节点的步骤,包括:
获取每个所述计算机节点的剩余存储空间;
从所述所有计算机节点中筛选出剩余存储空间大于预设阈值的计算机节点,得到多个目标计算机节点。
优选地,所述根据预设筛选规则对所述所有计算机节点进行筛选,得到多个目标计算机节点的步骤,包括:
剔除在上一轮存储时已使用的计算机节点,将剩余的计算机节点作为所述目标计算机节点。
在一实施例中,存储所述目标数据的目标计算机节点的评估值与所述目标数据的权重值成正相关。
进一步地,所述将每个所述目标数据存储至相应评估值的目标计算机节点中的步骤之后,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州炒米信息科技有限公司,未经广州炒米信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111587589.6/2.html,转载请声明来源钻瓜专利网。