[发明专利]存储系统写缓存数据下发方法及相关组件

说明书

本申请公开了存储系统写缓存数据下发方法，包括：确定事务调度到写缓存的并发处理阈值；当启动写缓存数据下发时，根据下发数据量以及写缓存完成数据量判断写缓存的待处理数据量是否达到并发处理阈值；若达到，暂停向写缓存的数据下发；若未达到，继续向写缓存的数据下发。该方法提出了一种可控的方式进行数据从事务到写缓存的下发策略，引入了事务调度到写缓存IO的并发阈值，只有当并发数量小于阈值的时候才开始对于事务IO下发线程的调度，减轻了写缓存的数据处理压力，也避免了上层主机IO超时的情况，提升了用户体验。本申请还提供了一种存储系统写缓存数据下发装置、设备及一种可读存储介质，具有上述有益效果。

技术领域

本申请涉及数据存储技术领域，特别涉及一种存储系统写缓存数据下发方法、装置、设备及一种可读存储介质。

背景技术

元数据事务日志同步，是指在存储系统IO过程中，会将已经产生的元数据做事务操作，进行双控之间的事务日志同步，当发生掉电或者其他故障切换的时候会把事务日志持久化到磁盘上，当控制器上电或者恢复的时候会将事务日志信息从磁盘上重新加载上来进行事务日志重做，从而保证存储系统的数据一致性。当元数据事务日志完成同步后，会把同步好的请求下发到元数据写缓存，写缓存模块存储元数据以降低主机IO的数据响应时延。

传统方法下，事务日志模块在收到元数据并同步完成后立即将数据下发至写缓存模块，而由于写缓存模块的数据处理压力较大，写缓存模块经常会出现待缓存数据过多的情况，写缓存处理不过来时候会持续的导致数据积压，最后反而会导致上层主机IO超时，影响用户体验。

发明内容

本申请的目的是提供一种存储系统写缓存数据下发方法，该方法可以在后端处理繁忙时减轻数据缓存压力，减少主机IO超时情况的发生，提升存储系统的性能以及用户体验；本申请的另一目的是提供一种存储系统写缓存数据下发装置、设备及一种可读存储介质。

为解决上述技术问题，本申请提供一种存储系统写缓存数据下发方法，包括：

确定事务调度到写缓存的并发处理阈值；

当启动写缓存数据下发时，根据下发数据量以及写缓存完成数据量判断所述写缓存的待处理数据量是否达到所述并发处理阈值；

若达到，暂停向所述写缓存的数据下发；

若未达到，继续向所述写缓存的数据下发。

可选地，根据所述下发数据量以及所述写缓存完成数据量判断所述写缓存的待处理数据量是否达到所述并发处理阈值，包括：

当启动写缓存数据下发时，将所述下发数据量作为所述待处理数据量，并判断所述待处理数据量是否达到所述并发处理阈值；

若接收到IO回调信息，则判定所述待处理数据量未达到所述并发处理阈值；

则相应地，继续向所述写缓存的数据下发，包括：根据所述IO回调信息确定所述写缓存完成数据量；

根据所述写缓存完成数据量确定所述待处理数据量，并根据所述待处理数据量向所述写缓存进行数据下发。

可选地，所述存储系统写缓存数据下发方法还包括：采集指定时间间隔内存储系统的处理参数；

根据所述处理参数对所述并发处理阈值进行反馈调整。

可选地，根据所述处理参数对所述并发处理阈值进行反馈调整，包括：

收集预设周期内不同并发处理阈值下的所述处理参数；

调用机器学习模型对各所述并发处理阈值以及对应的所述处理参数进行分类统计，得到优化后的并发处理阈值。

可选地，采集指定时间间隔内存储系统的处理参数，包括：

采集指定时间间隔内存储系统的时延以及IOPS值。