[发明专利]一种待落盘数据处理方法、装置、电子设备及存储介质有效
| 申请号: | 201910285649.5 | 申请日: | 2019-04-10 |
| 公开(公告)号: | CN110018792B | 公开(公告)日: | 2020-05-29 |
| 发明(设计)人: | 谢有权 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 待落盘 数据处理 方法 装置 电子设备 存储 介质 | ||
本申请公开了一种待落盘数据处理方法,相比于先判别是否全部对齐、再对判别出的大块对齐部分进行压缩的现有技术,本申请先对待落盘数据整体进行压缩,然后在判别压缩后待落盘数据是否全部对齐,由于将压缩步骤提前至对齐判别步骤之前,使得压缩对象从原先的大块对齐部分变为了待落盘数据整体,因此在使用与现有技术相同的压缩算法情况下,压缩对象大小的增加使得压缩率也随之增加。本申请还同时公开了一种待落盘数据处理装置、电子设备及计算机可读存储介质,具有上述有益效果。
技术领域
本申请涉及数据落盘技术领域,特别涉及一种待落盘数据处理方法、装置、电子设备及计算机可读存储介质。
背景技术
随着电子信息技术的发展,人们对存储介质的存储速度提出了更高的要求,相比于机械硬盘,固态硬盘因拥有更快的数据存取速度受到了的追捧。
由于固态硬盘的特殊特性,使其虽然拥有更快的数据存储速度但却存在写放大的问题,为了解决写放大问题带来的固态硬盘使用寿命降低的问题,一种常见的解决写放大的机制如下:通过尽可能的减少写入固态硬盘中的数据落盘大小,以通过减慢占用存储空间的方式来减缓因写放大问题造成的使用寿命降低问题。
现有技术通常在处理待落盘数据时,会先判别该待落盘数据是否全部对齐,然后只将大块的对齐部分进行压缩后下发给磁盘进行落盘的方案。这是因为相对于大块的对齐部分,非对齐部分通常数据量较少,不用再单独对齐进行压缩,因此非对齐部分将会保持原有大小进行落盘。为了对接数据落在固态硬盘中的步骤,一定要结合固态硬盘的特殊特性(固态硬盘使用划分好的、固定大小的块来存储数据)来判别数据是否全部对齐,所以无法轻易的对对齐步骤进行改进。
因此,如何尽可能的增大待落盘数据的压缩率,是本领域技术人员亟待解决的问题。
发明内容
本申请目的在于提供一种待落盘数据处理方法、装置、电子设备及计算机可读存储介质,旨在解决现有技术中仅对对齐部分的数据进行压缩所带来的压缩率不够高的问题。
为实现上述目的,本申请提供一种待落盘数据处理方法,该方法包括:
接收客户端下发的待落盘数据;
压缩所述待落盘数据,得到压缩后待落盘数据;
判断所述压缩后待落盘数据是否全部对齐;
若所述压缩后待落盘数据全部对齐,则将所述压缩后待落盘数据下发至磁盘进行落盘;
若所述压缩后待落盘数据未全部对齐,则将对齐部分下发至磁盘进行落盘、将未对齐部分进行对齐处理后下发至所述磁盘进行落盘。
可选的,压缩所述待落盘数据,包括:
使用与所述待落盘数据所属数据类型对应的优选压缩算法压缩所述待落盘数据。
可选的,该待落盘数据处理方法还包括:
判断所述压缩后待落盘数据的大小是否满足后台处理要求;
若所述压缩后待落盘数据的大小满足所述后台处理要求,则将所述压缩后待落盘数据转至后台处理,并在转至后台的同时向上层数据库返回落盘完成信号,以处理下一个压缩后待落盘数据。
为实现上述目的,本申请还提供了一种待落盘数据处理装置,包括:
待落盘数据接收单元,用于接收客户端下发的待落盘数据;
待落盘数据压缩单元,用于压缩所述待落盘数据,得到压缩后待落盘数据;
对齐判断单元,用于判断所述压缩后待落盘数据是否全部对齐;
直接落盘单元,用于当所述压缩后待落盘数据全部对齐时,将所述压缩后待落盘数据下发至磁盘进行落盘;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910285649.5/2.html,转载请声明来源钻瓜专利网。





