[发明专利]一种调整数据块存储位置的方法及系统有效
申请号: | 201410208154.X | 申请日: | 2014-05-16 |
公开(公告)号: | CN103970879B | 公开(公告)日: | 2017-05-24 |
发明(设计)人: | 杨树强;陈志坤;金松昌;尹洪;贾焰;韩伟红;周斌;李爱平 | 申请(专利权)人: | 中国人民解放军国防科学技术大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 王宝筠 |
地址: | 410073 湖南*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 调整 数据 存储 位置 方法 系统 | ||
1.一种调整数据块存储位置的方法,其特征在于,包括:
获取分布式网络中的n个数据块;
利用超图确定所述n个数据块中任意m个数据块之间的相关度,m<n;
将所述m个数据块划分至多个数据块集合,所述m个数据块中的任意一个数据块只属于所述多个数据块集合中的一个数据块集合,属于同一个数据块集合的数据块之间的相关度大于预设相关阈值;
对于任意一个所述数据块集合,分别计算将所述数据块集合中的数据块迁移至所述分布式网络中的各个数据存储节点中所对应的迁移代价值;
确定最小的所述迁移代价值对应的目标数据存储节点;
将所述数据块集合中的数据块存储至所述目标数据存储节点;
所述利用超图确定所述n个数据块中任意m个数据块之间的相关度,具体包括:
确定历史操作访问过的数据块;
将所述历史操作访问过的数据块设定为超图的顶点;
根据公式计算每个顶点的权重,其中frqj表示的历史操作j的频率,wvi表示顶点i的权重;fumji=1表示在历史操作中第j个操作访问了第i个数据块;k代表的是历史操作的总数;
将每个历史操作作为一条超边;
将与该超边对应的历史操作访问过的数据块,作为该超边的顶点;
根据公式wej=frqj计算每个超边的权重,其中wej表示超边j的权重;
根据上述步骤构造的超图模型中,所述超边的权重用于表示数据块之间的相关度。
2.根据权利要求1所述的方法,其特征在于,所述计算将所述数据块集合中的数据块迁移至所述分布式网络中的各个数据存储节点中所对应的迁移代价值之前,还包括:
判断所述数据块集合中的数据块个数是否位于预设个数范围内;
当所述数据块集合中的数据块个数小于所述预设个数范围的下限时,将其它的数据块集合中的数据块转移至所述数据块集合;
当所述数据块集合中的数据块个数大于所述预设个数范围的上限时,将所述数据块集合中的数据块转移至其它的数据块集合中。
3.根据权利要求1所述的方法,其特征在于,所述计算将所述数据块集合中的数据块迁移至所述分布式网络中的各个数据存储节点中所对应的迁移代价值,具体包括:
根据公式
计算将所述数据块集合中的数据块迁移至所述分布式网络中的各个数据存储节点中所对应的迁移代价值;
其中,表示数据块集合Ci中第m个数据块的权重,表示数据块集合Ci中第m个数据块现在所属的站点ID,Costi→j表示的是将数据块集合i迁移到数据存储节点j上的代价。
4.根据权利要求1所述的方法,其特征在于,所述将所述m个数据块划分至多个数据块集合,具体包括:
采用hMetis超图划分算法,将所述超图模型划分为多个数据块集合,以便确保所述多个数据块集合为具有最小割的划分结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军国防科学技术大学,未经中国人民解放军国防科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410208154.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置