[发明专利]一种云存储系统的数据存储方法和装置在审
申请号: | 201710059584.3 | 申请日: | 2017-01-24 |
公开(公告)号: | CN108347466A | 公开(公告)日: | 2018-07-31 |
发明(设计)人: | 饶玮;周爱华;朱力鹏;胡斌;潘森;杨佩;伏如祥;陈艳;赵玉杰 | 申请(专利权)人: | 全球能源互联网研究院;国网上海市电力公司;国家电网公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京安博达知识产权代理有限公司 11271 | 代理人: | 徐国文 |
地址: | 102209 北京市昌平*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据块 集合 数据节点 物理数据 用户访问数据 分类 方法和装置 数据块集合 云存储系统 构建单元 节点性能 权重矩阵 数据存储 权重 数据存储单元 数据块存储 访问数据 关系构建 关系矩阵 物理集群 系统性能 用户服务 块信息 监控 分配 保证 | ||
1.一种云存储系统的数据存储方法,其特征在于,所述方法包括:
根据用户访问数据块组成的数据块集合和数据块关系矩阵,构建数据块关系权重矩阵;根据数据块关系权重矩阵,计算所述数据块关系权重分类集合;
根据物理集群的数据节点集合,计算物理数据节点性能值;根据物理数据节点性能值,确定数据节点分类集合;
根据数据块关系权重分类集合和数据节点分类集合,分配物理数据节点和存储数据块。
2.如权利要求1所述的方法,其特征在于,所述数据块集合P如式所示:P={M1,M2,…,Mk},其中,Mk:数据块集合中k的数据块;k:数据集合块中数据块的序号;
所述数据块关系矩阵R如下所示:
其中,Rij:表示数据块i和数据块j的关联度;i=1,2,...;j=1,2,…。
3.如权利要求1所述的方法,其特征在于,所述数据块关系权重矩阵RW如下所示:
其中,数据块i和数据块j的关系权重按下式计算:
式中,Rmin、Rmax:分别表示关系矩阵R中的最小值、最大值。
4.如权利要求3所述的方法,其特征在于,所述数据块关系权重分类集合包括:
1)数据块i和数据块j的关系权重与数据块n和数据块m的关系权重相等构成的数据块集合{Mi,Mj,Mn,Mm};
2)按关系权重由大到小排序,得数据块关系权重分类集合I={I1,I2,…,IH}。
5.如权利要求1所述的方法,其特征在于,所述物理集群的数据节点集合DN如下式所示:DN={DN1,DN2,…,DNL},其中,DN1,DN2,…,DNL:数据节点;L:物理集群中的数据节点的序号;
按下式计算数据节点e的性能值Pe:
Pe=α*BWe+β*VI/O,e+γ*DSe
其中,BWe:数据节点e的网络带宽;VI/O,e:数据节点e的I/O速度;DSe:数据节点e的磁盘空间;α、β、γ:分别表示网络带宽、I/O速度、磁盘空间的权重因子,且α+β+γ=1;
数据节点性能值集合P如下式所示:P={P1,P2,…,PL}。
6.如权利要求5所述的方法,其特征在于,所述数据节点分类集合的确定包括:
将数据节点性能值集合P和数据块关系权重分类集合中序号1~H的子集总合作为输入参数,将数据节点性能值集合P分为n个簇;
按下式分别计算n个簇的平均性能值
式中,N:数据节点性能值集合P的簇h中的物理数据节点的总体数量;
按平均性能值由大到小排序,得到数据节点分类集合S={S1,S2,…,Sh},式中,S1,S2,…,Sh:数据节点分类集合中的数据节点性能值的分簇。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于全球能源互联网研究院;国网上海市电力公司;国家电网公司,未经全球能源互联网研究院;国网上海市电力公司;国家电网公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710059584.3/1.html,转载请声明来源钻瓜专利网。