[发明专利]一种桶生命周期配置方法、装置、设备及介质

说明书

本申请公开了一种桶生命周期配置方法、装置、设备及介质，包括：确定桶生命周期的配置参数的可行域；基于所述可行域，利用预设多目标优化算法以第一优化目标和第二优化目标确定最优配置参数集；其中，所述第一优化目标为基于配置参数处理过期数据之后剩余过期数据相对于总过期数据的空间占比；所述第二优化目标为基于配置参数处理过期数据对应的集群性能占用率；从所述最优配置参数集中确定出目标配置参数，利用所述目标配置参数配置桶生命周期。这样，能够兼顾桶生命周期效果以及其他业务处理，从而提升系统性能。

技术领域

本申请涉及对象存储技术领域，特别涉及一种桶生命周期配置方法、装置、设备及介质。

背景技术

在实际的存储过程中，部分数据不必长时间存储在系统中，因此往往需要数据过期删除的功能。在RGW(即RADOS(即Reliable Autonomic Distributed Object Store，可靠,自治,分布式对象存储)gateway，对象存储网关)中，针对数据的过期删除功能为桶生命周期，即LC(即lifecycle，生命周期)，该功能可以给桶设置一个规则，这个规则包括桶里的何种数据在何时会过期，以及过期之后是删除还是转移到其他存储空间。其中，桶生命周期的配置参数影响桶生命周期的执行效果。

在RGW中，当数据量超过一定范围时，由于的特性是遍历桶中所有的对象元数据之后把过期对象删除或转移，所以可能有对象在规定时间内没有被删除或转移，例如，设置3天后过期的对象可能在一周后才被删除或转移，造成空间的释放不及时，影响存储系统性能。然而盲目调高LC的转移或删除效率，又会因为LC对系统资源的占用而引发其他业务的处理问题。当前，桶生命周期的参数设置一般根据经验，但由于需要兼顾LC效果和其他业务的处理很难做出选择，难以适应现在大规模存储的多样化需求。

发明内容

有鉴于此，本申请的目的在于提供一种桶生命周期配置方法、装置、设备及介质，能够兼顾桶生命周期效果以及其他业务处理，从而提升系统性能。其具体方案如下：

第一方面，本申请公开了一种桶生命周期配置方法，包括：

确定桶生命周期的配置参数的可行域；

基于所述可行域，利用预设多目标优化算法以第一优化目标和第二优化目标确定最优配置参数集；其中，所述第一优化目标为基于配置参数处理过期数据之后剩余过期数据相对于总过期数据的空间占比；所述第二优化目标为基于配置参数处理过期数据对应的集群性能占用率；

从所述最优配置参数集中确定出目标配置参数，利用所述目标配置参数配置桶生命周期。

可选的，所述确定桶生命周期的配置参数的可行域，包括：

确定桶生命周期的并发线程数、最大对象数以及线程队列数的可行域。

可选的，所述第一优化目标以及所述第二优化目标的优化目标公式为：

其中，Er表示第一优化目标，Pr表示第二优化目标，m_worker表示并发线程数，m_wq表示线程队列数，m_obj表示最大对象数，S表示过期数据总数，W表示集群总性能数据。

可选的，所述基于所述可行域，利用预设多目标优化算法以第一优化目标和第二优化目标确定最优配置参数集，包括：

基于所述可行域，利用多目标粒子群优化算法以第一优化目标和第二优化目标确定最优配置参数集。

可选的，所述基于所述可行域，利用多目标粒子群优化算法以第一优化目标和第二优化目标确定最优配置参数集，包括：

确定种群个数以及最大评价次数；

基于所述可行域、种群个数以及最大评价次数，利用多目标粒子群优化算法以第一优化目标和第二优化目标确定最优配置参数集。