[发明专利]日志写入方法、存储管理设备及系统有效
申请号: | 201710857455.9 | 申请日: | 2017-09-21 |
公开(公告)号: | CN109542329B | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 曹伟 | 申请(专利权)人: | 阿里云计算有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/14 |
代理公司: | 北京太合九思知识产权代理有限公司 11610 | 代理人: | 刘戈 |
地址: | 310012 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 写入 方法 存储 管理 设备 系统 | ||
本申请实施例提供一种日志写入方法、存储管理设备及系统。在本申请实施例中,以日志磁盘中物理扇区的大小大于或等于日志元信息大小与基准数据块大小之和为基础,在向日志磁盘中写入待写入日志项时,结合地址对齐以及数据拼接可以将待写入日志项拼接为内存块,使得可以通过更少的IO操作将待写入日志项写入日志磁盘的物理扇区中,减小向日志磁盘中写入日志项所需要的IO操作的次数,提高了向日志磁盘中写入日志项的执行效率。
技术领域
本申请涉及存储技术领域,尤其涉及一种日志写入方法、存储管理设备及系统。
背景技术
预写式日志(Write Ahead Log,WAL)是在存储系统中保证原子性(Atomicity)和持久性(Durability)的一种技术,可为存储系统的恢复机制提供良好的基础。
在使用WAL的存储系统中,在将数据写入数据库之前,先将数据写入日志磁盘上的日志文件中,然后将数据持久化到数据库中,这样在存储系统发生宕机时,可以通过WAL日志恢复到宕机前的状态,以避免造成数据丢失。
在上述过程中,向日志磁盘写入日志数据的效率相对较低,有待提供一种新的方案来提高写日志的效率。
发明内容
本申请的多个方面提供一种日志写入方法、存储管理设备及系统,用以提高写日志的效率。
本申请实施例提供一种日志写入方法,包括:
获取待写入日志项,所述待写入日志项包括日志元信息和待写入日志数据,所述待写入日志数据的大小是基准数据块大小的M倍,M是正整数;
按照日志磁盘中物理扇区的大小对所述待写入日志项进行地址对齐,以确定用于存储所述待写入日志项的物理扇区的起始地址,所述日志磁盘中物理扇区的大小大于或等于所述日志元信息的大小与所述基准数据块大小之和;
对所述日志元信息和所述待写入日志数据进行数据拼接以形成N个内存块,N=M,且N为正整数;
将所述N个内存块写入所述日志磁盘中自所述起始地址开始的N个物理扇区中。
本申请实施例还提供一种存储管理设备,包括:存储器、处理器以及通信组件;
所述存储器,用于存储程序;
所述处理器,耦合至所述存储器,用于执行所述程序以用于:
获取待写入日志项,所述待写入日志项包括日志元信息和待写入日志数据,所述待写入日志数据的大小是基准数据块大小的M倍,M是正整数;
按照日志磁盘中物理扇区的大小对所述待写入日志项进行地址对齐,以确定用于存储所述待写入日志项的物理扇区的起始地址,所述日志磁盘中物理扇区的大小大于或等于所述日志元信息的大小与所述基准数据块大小之和;
对所述日志元信息和所述待写入日志数据进行数据拼接以形成N个内存块,N=M,且N为正整数;
通过所述通信组件将所述N个内存块写入所述日志磁盘中自所述起始地址开始的N个物理扇区中;
所述通信组件,用于将所述N个内存块写入所述日志磁盘中自所述起始地址开始的N个物理扇区中。
本申请实施例还提供一种基于日志的存储系统,包括上述实施例提供的存储管理设备、日志磁盘以及数据库;所述存储管理设备与所述日志磁盘以及所述数据库连接。
在本申请实施例中,以日志磁盘中物理扇区的大小大于或等于日志元信息大小与基准数据块大小之和为基础,在向日志磁盘中写入待写入日志项时,结合地址对齐以及数据拼接可以将待写入日志项拼接为内存块,使得可以通过更少的IO操作将待写入日志项写入日志磁盘的物理扇区中,减小向日志磁盘中写入日志项所需要的IO操作的次数,提高了向日志磁盘中写入日志项的执行效率。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710857455.9/2.html,转载请声明来源钻瓜专利网。