[发明专利]一种调整数据块存储位置的方法及系统有效
申请号: | 201410208154.X | 申请日: | 2014-05-16 |
公开(公告)号: | CN103970879B | 公开(公告)日: | 2017-05-24 |
发明(设计)人: | 杨树强;陈志坤;金松昌;尹洪;贾焰;韩伟红;周斌;李爱平 | 申请(专利权)人: | 中国人民解放军国防科学技术大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司11227 | 代理人: | 王宝筠 |
地址: | 410073 湖南*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种调整数据块存储位置的方法及系统。所述方法包括获取分布式网络中的n个数据块;利用超图确定n个数据块中任意m个数据块之间的相关度,m<n;将m个数据块划分至多个数据块集合,属于同一个数据块集合的数据块之间的相关度大于预设相关阈值;对于任意一个数据块集合,分别计算将数据块集合中的数据块迁移至分布式网络中的各个数据存储节点中所对应的迁移代价值;确定最小的迁移代价值对应的目标数据存储节点;将数据块集合中的数据块存储至目标数据存储节点。采用本发明的方法或系统,可以将相关度较高的数据块存储到尽可能少的数据存储节点上,进而降低对数据进行处理时的网络通信开销,提高对数据进行处理的效率。 | ||
搜索关键词: | 一种 调整 数据 存储 位置 方法 系统 | ||
【主权项】:
一种调整数据块存储位置的方法,其特征在于,包括:获取分布式网络中的n个数据块;利用超图确定所述n个数据块中任意m个数据块之间的相关度,m<n;将所述m个数据块划分至多个数据块集合,所述m个数据块中的任意一个数据块只属于所述多个数据块集合中的一个数据块集合,属于同一个数据块集合的数据块之间的相关度大于预设相关阈值;对于任意一个所述数据块集合,分别计算将所述数据块集合中的数据块迁移至所述分布式网络中的各个数据存储节点中所对应的迁移代价值;确定最小的所述迁移代价值对应的目标数据存储节点;将所述数据块集合中的数据块存储至所述目标数据存储节点;所述利用超图确定所述n个数据块中任意m个数据块之间的相关度,具体包括:确定历史操作访问过的数据块;将所述历史操作访问过的数据块设定为超图的顶点;根据公式计算每个顶点的权重,其中frqj表示的历史操作j的频率,wvi表示顶点i的权重;fumji=1表示在历史操作中第j个操作访问了第i个数据块;k代表的是历史操作的总数;将每个历史操作作为一条超边;将与该超边对应的历史操作访问过的数据块,作为该超边的顶点;根据公式wej=frqj计算每个超边的权重,其中wej表示超边j的权重;根据上述步骤构造的超图模型中,所述超边的权重用于表示数据块之间的相关度。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军国防科学技术大学,未经中国人民解放军国防科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410208154.X/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置