[发明专利]一种用于分级存储的数据迁移方法及系统

说明书

本申请公开了一种用于分级存储的数据迁移方法，步骤A：以预设周期比较在线存储设备中已使用空间的占比是否大于或等于第一预设阈值，若是，执行步骤B，否则，重新执行步骤A；步骤B：当在线存储设备中的已使用空间占比大于或等于第一预设阈值时，获取在线存储设备中所有数据表的属性信息，执行步骤C；步骤C：基于属性信息计算所有数据表的迁移值，执行步骤D；步骤D：迁移在线存储设备中迁移值最大的数据表对应的数据至离线存储设备，执行步骤E；步骤E：比较在线存储设备中已使用空间的占比是否小于或等于第二预设阈值，若是，执行步骤A，否则，执行步骤D。本申请实现了迁移速度快、释放空间大、影响范围小、访问效率高的目的。

技术领域

本申请涉及数据存储技术领域，尤其涉及一种用于分级存储的数据迁移方法及系统。

背景技术

分级存储策略是指将数据存储在不同性能级别的存储设备，一般而言，将访问频率高、日期近、价值高的数据存储于在线存储设备中，以保证访问效率；将访问频率低、日期远、价值低的数据存储与离线存储设备中，以降低存储成本。通过分级存储管理软件实现数据在存储设备之间的自动迁移，数据迁移的规则可以人为控制也可以根据一定的规则自动执行，迁移时机选择通常是根据数据的访问率、容量、性能要求等因素确定的。

现有数据迁移方案中，一般仅根据数据规模、使用频率决定是否迁移，并按照随机顺序进行迁移。现有技术中的方案仅根据规模、使用频率，忽略数据的迁移耗时、更新频率、数据关联度、应用系统打分等其他属性，会造成迁移效率低，存储成本高，访问时间长。

因此，如何提高数据迁移的效率，降低存储成本，降低访问时间，成为了本领域技术人员亟需解决的问题。

发明内容

有鉴于此，本申请提供了本申请提出一种将数据从在线存储设备迁移至离线存储设备的技术方案，以达到迁移速度快、释放空间大、影响范围小、访问效率高的目的。

本申请提供了一种用于分级存储的数据迁移方法，包括：

步骤A：以预设周期比较在线存储设备中已使用空间的占比是否大于或等于第一预设阈值，若是，执行步骤B，否则，重新执行步骤A；

步骤B：当所述在线存储设备中的已使用空间占比大于或等于第一预设阈值时，获取所述在线存储设备中所有数据表的属性信息，执行步骤C；

步骤C：基于所述属性信息计算所有数据表的迁移值，执行步骤D；

步骤D：迁移在线存储设备中迁移值最大的数据表对应的数据至离线存储设备，执行步骤E；

步骤E：比较在线存储设备中已使用空间的占比是否小于或等于第二预设阈值，若是，执行步骤A，否则，执行步骤D。

优选地，所述属性信息包括日均增长量、迁移耗时、更新频率、数据关联度及应用系统打分。

优选地，所述基于所述属性信息计算所有数据表的迁移值包括：

将所述日均增长量、迁移耗时、更新频率、数据关联度及应用系统打分进行标准化处理；

基于所述日均增长量、迁移耗时、更新频率、数据关联度及应用系统打分计算所有数据表的迁移值。

优选地，迁移值＝4日均增长量-3迁移耗时-2更新频率-1数据关联度-1应用系统打分。

优选地，所述第一预设阈值为80％，所述第二预设阈值为60％。

一种用于分级存储的数据迁移系统，包括比较模块、信息获取模块、计算模块及迁移模块，其中：

所述比较模块用于以预设周期比较在线存储设备中已使用空间的占比是否大于或等于第一预设阈值；