[发明专利]访问请求的处理方法、装置、设备及存储介质有效

专利信息
申请号: 201910713053.0 申请日: 2019-08-02
公开(公告)号: CN112306925B 公开(公告)日: 2023-02-10
发明(设计)人: 鲁鹏;刘金虎;杜晓东 申请(专利权)人: 华为技术有限公司
主分类号: G06F13/20 分类号: G06F13/20;G06F13/364;G06F9/48;G06F9/50
代理公司: 北京三高永信知识产权代理有限责任公司 11138 代理人: 颜晶
地址: 518129 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 访问 请求 处理 方法 装置 设备 存储 介质
【说明书】:

本申请提供了一种访问请求的处理方法、装置、设备及存储介质,属于存储技术领域。本申请实施例中,在数据迁移的场景下,通过将旧的存储设备的数据以及旧的存储设备训练出的AI模型,均从旧的存储设备迁移到新的存储设备上,新的存储设备如果接收到访问请求,通过复用旧的存储设备训练好的AI模型,即可得到AI模型针对访问请求的预测结果,从而免去新的存储设备重新进行模型训练带来的时间开销,提高了新的存储设备利用AI模型提供功能的效率。

技术领域

本申请涉及存储技术领域,特别涉及一种访问请求的处理方法、装置、设备及存储介质。

背景技术

随着存储技术以及人工智能(artificial intelligence,AI)技术的发展,可以使用AI模型学习出上层应用对存储设备中存储的数据的访问模式,当存储设备接收到访问请求时,存储设备可以根据访问请求,利用AI模型来预测出将要使用的指令或数据,从而进行缓存(cache)预取,或者利用AI模型来预测出发送访问请求的工作负载(workload),从而实现工作负载识别功能,或者利用AI模型来预测出需要分配多少资源来处理访问请求,从而实现智能调度功能。

存储设备会在运行过程中,基于输入输出(input output,IO)请求进行模型训练,得到AI模型。具体而言,在存储设备初始化的过程中,存储设备会创建AI模型,将该AI模型的参数置为预设初始值,得到初始AI模型。之后,存储设备启动,每当接收到对存储的数据的IO请求,存储设备会根据IO请求,获取初始AI模型的预测结果,再根据预测结果的误差,对初始AI模型的参数进行调整,直至预测结果的误差小于误差阈值为止,将初始AI模型作为训练完成的AI模型。

相关技术中,在数据迁移的场景下,比如需要将数据从在旧的存储设备上存储,改为将数据在新的存储设备上存储时,旧的存储设备和新的存储设备均需要为数据执行模型训练流程。具体地,旧的存储设备在历史运行过程中,客户端会向旧的存储设备发送历史IO请求,旧的存储设备会接收到历史IO请求,历史IO请求用于请求读取数据或写入数据。旧的存储设备会根据历史IO请求进行模型训练,得到AI模型。当需要迁移数据时,旧的存储设备会向新的存储设备发送数据,新的存储设备会从旧的存储设备接收数据,存储数据,从而完成数据迁移。此后,客户端会向新的存储设备发送IO请求,新的存储设备接收到IO请求后,会基于IO请求,重新执行模型训练的流程,来重新得到AI模型。

采用上述方法时,新的存储设备需要重新进行模型训练,才能得到AI模型,而重新进行模型训练会耗费很长的时间,影响了新的存储设备利用AI模型来提供缓存预取、负载识别、智能调度等功能的效率。

发明内容

本申请实施例提供了一种访问请求的处理方法、装置、设备及存储介质,能够免去新的存储设备重新进行模型训练带来的时间开销,提高新的存储设备利用AI模型提供功能的效率。

第一方面,提供了一种访问请求的处理方法,应用于第一存储设备,所述方法包括:接收来自第二存储设备的数据以及人工智能AI模型,所述AI模型由所述第二存储设备在历史运行过程中,基于对所述数据的历史输入输出IO请求训练得到;存储所述数据以及所述AI模型;接收对所述数据的访问请求;根据所述访问请求,获取所述AI模型的预测结果。

在数据从第二存储设备迁移至第一存储设备的场景下,通过将AI模型也从第二存储设备迁移至第一存储设备,第一存储设备可以复用第二存储设备已训练的AI模型,来得到AI模型的预测结果,从而免去了第一存储设备重新进行模型训练的流程,进而免去了第一存储设备重新训练AI模型带来的时间开销。由于第一存储设备得到AI模型的速度更快,第一存储设备根据AI模型来得到预测结果的速度也就更快,因此根据预测结果来提供缓存预取、负载识别、智能调度等功能的速度也就更快,从而极大地提高了第一存储设备进行缓存预取、负载识别以及智能调度的效率。

可选地,所述数据属于所述第二存储设备的第一逻辑存储单元LUN,所述AI模型为所述第一LUN对应的目标AI模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910713053.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top