[发明专利]应用于分布式系统的延迟加载方法及装置有效
| 申请号: | 201810018294.9 | 申请日: | 2018-01-09 |
| 公开(公告)号: | CN110018879B | 公开(公告)日: | 2023-06-09 |
| 发明(设计)人: | 彭海林;佘海斌 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
| 主分类号: | G06F9/455 | 分类号: | G06F9/455;G06F9/50 |
| 代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 孙敬霞;栗若木 |
| 地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 应用于 分布式 系统 延迟 加载 方法 装置 | ||
本文公开了一种应用于分布式系统的延迟加载方法及装置,包括:根据来自块设备主节点的下载子块的请求,从镜像中心下载虚拟机镜像的数据块到相应的快照子块;在所述下载的过程中,通过分析所述快照子块中数据块的读取情况,确定所述快照子块的热点数据块,并将所述热点数据块发送至至少一个缓存服务节点。本申请能够提高热点数据块的读取效率,从而降低虚拟机启动时的读写延时。
技术领域
本发明涉及计算机技术领域,尤其涉及一种应用于分布式系统的延迟加载方法及装置。
背景技术
云计算中最重要的部分是弹性计算。在当今的互联网应用中,业务流量波动非常剧烈,当这些应用运行在云计算平台上时,对虚拟机的需求数量也是弹性非常大,也就是说,当业务高峰到来的时候,需要在短时间内启动大量的虚拟机。
在短时间内大量启动虚拟机,就需要并发完成大量虚拟机块设备从磁盘镜像的加载过程,这将对云计算架构下块设备存储集群(EBS)、镜像中心(Image center)都构成巨大的压力,同时也让虚拟机的运行受到巨大干扰。同时,虚拟机启动过程中的读写延时(IOlatency)会大幅提高,虚拟机的读写会产生大量的毛刺,影响虚拟机的正常工作。
发明内容
本申请旨在至少解决相关技术中的技术问题之一。
本申请实施例提供一种应用于分布式系统的延迟加载方法及装置,至少能够提高热点数据块的读取效率,从而降低虚拟机启动时的读写延时。
本申请采用如下技术方案。
一种应用于分布式系统的延迟加载方法,包括:
根据来自块设备主节点的下载子块的请求,从镜像中心下载虚拟机镜像的数据块到相应的快照子块;
在所述下载的过程中,通过分析所述快照子块中数据块的读取情况,确定所述快照子块的热点数据块,并将所述热点数据块发送至至少一个缓存服务节点。
其中,所述通过分析所述快照子块中数据块的读取情况,确定所述快照子块的热点数据块,包括:记录延迟加载期间所述快照子块中数据块的读取次数和读取频率中至少之一;根据所述快照子块中数据块的读取次数和读取频率中至少之一,确定延迟加载期间所述快照子块的热点数据块。
其中,所述根据所述快照子块中数据块的读取次数和读取频率中至少之一,确定延迟加载期间所述快照子块的热点数据块,至少包括如下之一:
将所述快照子块中数据块的读取次数与预先设定的读取次数阈值比较,所述读取次数超过所述读取次数阈值时,确定所述数据块为热点数据块;
将所述快照子块中数据块的读取频率与预先设定的读取频率阈值比较,所述读取频率超过所述读取频率阈值时,确定所述数据块为热点数据块;
将所述快照子块中数据块的读取次数与预先设定的读取次数阈值比较,并将所述快照子块中数据块的读取频率与预先设定的读取频率阈值比较,所述读取次数超过所述读取次数阈值且所述读取频率超过所述读取频率阈值时,确定所述数据块为热点数据块。
其中,所述将所述热点数据块发送至至少一个缓存服务节点,包括:根据所述快照子块的快照标识和数据块标识、以及所有缓存服务节点的标识,按照分布式一致性哈希算法为所述快照子块分配至少一个缓存服务节点,并将所述快照子块的热点数据块送至所述至少一个缓存服务节点。
其中,所述方法还包括:接收到来自块设备服务节点的针对所述热点数据块的读请求时,至少向所述块设备服务节点返回对应所述热点数据块的第一标识,所述第一标识表示所述热点数据块已被发送至缓存服务节点,以便所述块设备服务节点后续向所述至少一个缓存服务节点获取相应快照子块的热点数据块。
一种应用于分布式系统的延迟加载装置,包括:
存储有计算机程序的存储器;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810018294.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种分布式系统数据加载方法以及装置
- 下一篇:IO线程执行方法及装置





