[发明专利]用于动态复制数据的方法和系统

说明书

本发明公开一种用于动态复制数据的方法和系统，涉及云计算技术领域。其中以预定周期检测元数据服务器集群中各元数据服务器的服务质量，若第i个元数据服务器的服务质量低于预定质量阈值，则将第i个元数据服务器中超过热度阈值的目录子树迁移到指定的第j个元数据服务器中，其中第j个元数据服务器在子树迁移后的服务质量不低于预定质量阈值，且i≠j。由于元数据服务器的服务质量与元数据服务器的服务能力及该元数据服务器目录树中根节点的热度相关联，因此本发明根据元数据服务器的服务质量对相应目录子树进行迁移，从而可实现弹性的动态复制，提高系统的可扩展性。

技术领域

本发明涉及云计算技术领域，特别涉及一种用于动态复制数据的方法和系统。

背景技术

复制是将一组数据从一个数据源拷贝到多个数据源的软件技术，是将一份数据发布到多个存储站点上的有效方式。典型的云计算对象存储系统一般采用“静态复制”策略：一方面，对象副本的信息在对象生成时由系统存储策略预先确定，包括副本的个数、副本的位置等，一旦副本建立，这些副本将存储在相对固定的对象存储设备上，直到它们由客户端删除或者其生命周期结束；另一方面，复制过程仅在对象存储设备间基于数据对象展开，很少甚至没有考虑数据对象所对应的元数据的复制。

这种静态复制策略既没有充分考虑数据对象对存取环境的自适应性，即针对“热点”数据动态扩展其服务能力，又没有综合考虑对象存储系统的交互特性，如元数据和数据对象的复制与客户端之间的交互关系，因而面对热点数据易产生数据访问性能瓶颈问题，且其元数据的无复制特性限制了系统的可扩展性。

发明内容

本发明实施例提供一种用于动态复制数据的方法和系统，由于元数据服务器的服务质量与元数据服务器的服务能力及该元数据服务器目录树中根节点的热度相关联，因此根据元数据服务器的服务质量对相应目录子树进行迁移，从而可实现弹性的动态复制，提高系统的可扩展性。

根据本发明的一个方面，提供一种用于动态复制数据的方法，包括：

以预定周期检测元数据服务器集群中各元数据服务器的服务质量；

若第i个元数据服务器的服务质量低于预定质量阈值，则将第i个元数据服务器中超过热度阈值的目录子树迁移到指定的第j个元数据服务器中，其中第j个元数据服务器在子树迁移后的服务质量不低于预定质量阈值，且i≠j。

在一个实施例中，元数据服务器的服务质量为该元数据服务器的服务能力S与该元数据服务器目录树中根节点的热度HM的商；

其中，元数据服务器的服务能力S为该元数据服务器的中央处理器、内存和带宽可用值的加权和；

元数据服务器中文档索引节点Inode的热度取决于该Inode的访问频率。

在一个实施例中，Inode的热度满足H_n＝H₀×f(t)+1

其中H₀为Inode的原有热度，H_n为Inode得到请求后的热度，f(t)为时间衰减函数，

t为前次计算热度与本次计算热度的时间差。

在一个实施例中，Inode子树父节点的热度与该Inode的热度变化相关联。

在一个实施例中，元数据服务器目录子树节点更新后，删除原有目录子树节点的副本。

在一个实施例中，在创建或更新数据对象时，在对象设备集群中选择Ns个对象存储设备以存储该数据对象的对象副本；

以预定周期监控相应元数据服务器目录子树中的叶子节点的热度HF；

若叶子节点对应的数据类型为文件，且该叶子节点的热度HF大于预定门限，则调整该数据对象的副本数N；