[发明专利]一种分层存储数据迁移方法和系统有效
| 申请号: | 202010094756.2 | 申请日: | 2020-02-16 |
| 公开(公告)号: | CN111367469B | 公开(公告)日: | 2022-07-08 |
| 发明(设计)人: | 毛贝贝 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 济南舜源专利事务所有限公司 37205 | 代理人: | 张营磊 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 分层 存储 数据 迁移 方法 系统 | ||
1.一种分层存储数据迁移方法,其特征在于,包括如下步骤:
获取文件的元数据信息;
根据所述的元数据信息计算文件价值;
根据文件价值产生文件迁移计划表;所述的文件迁移计划表内的迁移任务根据文件价值按优先级顺序排列;
从文件迁移计划表里取出迁移任务,对文件在不同存储层上进行迁移;
所述的获取文件的元数据信息中,所述的元数据信息包括文件的读写频率,顺序/随机访问比例,文件读写大小,文件读写顺序/随机系数;
文件读写顺序系数
文件读写随机系数
δ∈(0,1),设X周期的平均响应时间为t;
表示编号为i的文件在X周期内顺序访问的频率;
表示编号为i的文件在X周期内随机访问的频率;
δ是0到1之间的常数,表示历史访问频率对文件价值判定的影响大小;
所述的根据所述的元数据信息计算文件价值的步骤包括:
获取系统中所有文件在高速率存储层和低速率存储层完成所有读写操作所需要的时间;
根据获取的时间和文件读写顺序/随机系数计算存储层匹配程度系数;
根据所述的存储层匹配程度系数、文件读写顺序/随机系数和当前文件的大小计算文件价值F;所述的文件价值F用于体现文件存放在高速率存储层获得的价值;
其中γ为设定的文件最小值,α为文件大小权重,Fsize(i)为当前文件的大小,ρ匹配程度系数。
2.根据权利要求1所述的一种分层存储数据迁移方法,其特征在于,所述根据获取的时间和文件读写顺序/随机系数计算存储层匹配程度系数的步骤包括:
将获取的在低速率存储层顺序访问所需时间与在高速率存储层顺序访问所需时间计算时间差,并将计算的时间差与文件读写顺序系数相乘得到顺序匹配系数;
将获取的在低速率存储层随机访问所需时间与在高速率存储层随机访问所需时间计算时间差,并将计算的时间差与文件读写随机系数相乘得到随机匹配系数;
将顺序匹配系数与随机匹配系数相加得到存储层匹配程度系数。
3.根据权利要求1所述的一种分层存储数据迁移方法,其特征在于,所述的根据文件价值产生文件迁移计划表的步骤包括:
根据文件价值的大小对文件进行排序并输出文件列表;
遍历文件列表的每一个文件并输出文件迁移计划表;其中,遍历文件时,若当前文件未在高速率存储层,并且文件大小小于高速率存储层的可用空间,在迁移计划表里面添加一条文件迁移计划。
4.根据权利要求1所述的一种分层存储数据迁移方法,其特征在于,所述的从文件迁移计划表里取出迁移任务,对文件在不同存储层上进行迁移的步骤包括:
从文件迁移计划表里取出迁移任务,检测当前文件系统的性能信息并根据所述的性能信息,对文件在不同存储层上进行迁移;其中,所述的性能参数包括文件系统的负载率、剩余存储空间、历史访问模式。
5.根据权利要求4所述的一种分层存储数据迁移方法,其特征在于,所述的从文件迁移计划表里取出迁移任务,检测当前文件系统的性能信息并根据所述的性能信息,对文件在不同存储层上进行迁移的步骤中,具体步骤包括:
检测当前文件系统的负载率;
当检测到所述负载率小于设定的负载阈值时,检测目标存储层的文件存储容量,当目标存储层的文件存储容量低于设定的第一阈值时,从文件迁移计划表里取出迁移任务执行迁移;当前存储空间已满或者文件已经全部迁移完成后,停止迁移;
当目标存储层的文件存储容量高于设定的第二阈值时,判断待迁移文件大小小于目标存储层当前可用空间时,从文件迁移计划表里取出迁移任务执行迁移,否则不执行迁移过程,其中,第一阈值小于第二阈值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010094756.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





