[发明专利]一种基于块存储的动态调整存储单元的方法及装置

说明书

本发明公开了一种基于块存储的动态调整存储单元的方法及装置，通过比较待存储文件与存储单元剩余空间的大小，在待存储文件小于等于存储单元剩余空间时，保持存储单元尺寸不变进行存储，否则扩大或缩小存储单元尺寸以适应待存储文件大小，在块存储模式下，本发明存储单元尺寸通过阈值设置可动态调节，提高了存储空间的利用率，同时设置两个阈值包括最小阈值和最大阈值，避免过于频繁的变动，从而兼顾了存储性能。此外还通过保存调整前基准地址值来解决文件满覆盖时读取的问题。

技术领域

本发明属于数据存储技术领域，尤其涉及一种基于块存储的动态调整存储单元的方法及装置。

背景技术

在视频监控领域，尤其是视频监控卡口应用场景中，包括图片在内的小文件存储是需要面对的一大难题，通常存在图片存储的性能低下、存储数据不可靠、存储空间浪费等问题。对于文件尤其是图片块存储性能低下及空间浪费问题，已有的类似解决方法和思路是：将多个图片聚合存储，并将图片相对于存储单元的偏移量写入索引，以实现一次性查找定位，并在一定程度上解决图片存储空间浪费问题。

上述技术方案将一个批次的小文件按大文件的方式存储在一起，而拥有大文件的存储性能。将小文件映射成大文件后，在后端系统上存储大文件，一定程度上提升了存储空间的利用率和文件的查找性能。然而把图片或小文件映射成大文件的方式，存储单元的大小是固定的，这种情况下，当存储单元的剩余空间小于需要存储的文件大小时，因为无法塞入一张图片导致该存储单元的剩余空间浪费。

发明内容

本发明的目的是提供一种基于块存储的动态调整存储单元的方法，对现有文件块存储方法进行优化和改进，较好的解决了文件块存储导致存储空间浪费的问题。

为了实现上述目的，本发明技术方案如下：

一种基于块存储的动态调整存储单元的方法，包括：

比较待存储文件与存储单元剩余空间的大小；

在待存储文件小于等于存储单元剩余空间时，保持存储单元尺寸不变进行存储，否则扩大或缩小存储单元尺寸以适应待存储文件大小。

可选的，所述扩大或缩小存储单元尺寸以适应待存储文件大小，包括：

若存储单元剩余空间大于第一阈值，则扩大存储单元尺寸大小以便存储待存储文件；

若存储单元剩余空间小于第二阈值，则保持存储单元尺寸大小不变，将待存储文件存储到下一个存储单元；

若存储单元剩余空间小于等于第一阈值且大于等于第二阈值，则缩小存储单元尺寸大小，将待存储文件存储到下一个存储单元。

进一步地，所述扩大存储单元尺寸大小以便存储待存储文件，其中：

存储单元尺寸的扩大值为待存储文件大小与存储单元剩余空间大小的差值；

所述缩小存储单元尺寸大小，其中：

存储单元尺寸的缩小值为存储单元剩余空间大小。

进一步地，所述扩大或缩小存储单元尺寸以适应待存储文件大小，还包括：

在扩大或缩小存储单元尺寸以适应待存储文件大小时，更新待存储文件对应的索引，并记录偏移量。

进一步地，所述扩大或缩小存储单元尺寸以适应待存储文件大小，还包括：

在索引中保存存储单元调整前、后的基准地址。

本发明还提出了一种基于块存储的动态调整存储单元的装置，包括：

比较模块，用于比较待存储文件与存储单元剩余空间的大小；