[发明专利]一种提高数据存储系统处理速度的方法及数据存储系统

说明书

技术领域

本发明涉及数据存储技术领域，特别是涉及一种提高数据存储系统 处理速度的方法及数据存储系统。

背景技术

数据存储系统是指由存放程序和数据的各种存储设备、控制部件及 管理信息调度的设备和处理算法所组成的系统。随着存储数据越来越 多，存储系统的存储空间也越来越大，对数据存储系统的处理性能要求 也越来越高。

数据存储系统在处理数据时主要包括数据读写、元数据读写和日志 记录，而在现有技术的数据存储系统中，大多数采集机械硬盘或者串口 硬盘存储数据、元数据和日志记录。而机械硬盘和串口硬盘的读写速度 不高，在数据存储系统存在大量热点数据时，机械硬盘和串口硬盘自身 的读写速度会成数据存储系统的瓶颈。

发明内容

本发明主要解决的技术问题是提供一种提高数据存储系统处理速 度的方法及数据存储系统，能够提高数据存储系统的处理速度，优化数 据存储系统的处理性能。

为解决上述技术问题，本发明采用的一个技术方案是：提供一种一 种提高数据存储系统的处理速度的方法，所述存储系统包括日志存储空 间、元数据存储空间、数据存储空间和数据缓存空间，所述日志存储空 间、元数据存储空间和数据缓存空间的读写性能均优于数据存储空间的 读写性能，所述方法包括：接收待存储数据；判断所述数据存储空间的 空闲空间是否大于预设阈值；若大于，将所述待存储数据写入数据缓存 空间,并生成针写入实务记录，以及将所述待存储数据在数据缓存空间 的存储地址写入待存储数据的元数据中；将所述写入实务记录写入日志 存储空间，以及将所述待存储数据的元数据写入元数据存储空间。

其中，所述方法还包括：在客户端访问所述数据缓存空间存储的数 据时，记录访问所述数据缓存空间内的各个数据的访问时间和访问次 数；在所述数据存储空间的空闲空间小于或和等于预设阈值时，根据最 近最少使用算法，并结合所述数据缓存空间内的各个数据的访问时间和 访问次数，从所述数据缓存空间提取冷点数据；将所述冷点数据移动至 数据存储空间，并生成第一移动实务记录，将所述第一移动实务记录写 入日志存储空间，以及将在所述冷点数据的元数据内存储的存储地址替 换为冷点数据在数据存储空间的存储地址，再返回判断所述数据存储空 间的空闲空间是否大于预设阈值的步骤；

其中，所述方法还包括：在所述客户端访问所述数据存储空间存储 的数据时，记录访问所述数据存储空间内的各个数据的访问时间和访问 次数；根据所述数据存储空间内的各个的访问时间和访问次数，从所述 数据存储空间提取热点数据，并将所述热点数据移动至数据缓存空间， 并生成第二移动实务记录，将所述第二移动实务记录写入日志存储空 间，以及将存储于元数据存储空间内的热点数据的元数据内存储的存储 地址替换为热点数据在数据缓存空间的存储地址。

其中，所述数据存储空间和数据缓存空间的容量比为预设值。

其中，所述日志存储空间、元数据存储空间和数据缓存空间均为固 态硬盘；所述数据存储空间为串口硬盘或者机械硬盘。

为解决上述技术问题，本发明采用的另一个技术方案是：提供一种 数据存储系统，包括：元数据存储空间、数据缓存空间、数据存储空间、 日志存储空间和处理器，所述元数据存储空间、数据缓存空间、数据存 储空间和日志存储空间均与处理器连接，并且所述日志存储空间、元数 据存储空间和数据缓存空间的读写性能均优于数据存储空间的读写性 能；所述处理器用于：接收待存储数据；判断所述数据存储空间的空闲 空间是否大于预设阈值；若大于，将所述待存储数据写入数据缓存空间, 并生成针写入实务记录，以及将所述待存储数据在数据缓存空间的存储 地址写入待存储数据的元数据；将所述写入实务记录写入日志存储空 间，以及将所述待存储数据的元数据写入元数据存储空间。

其中，所述处理器还用于：在客户端访问所述数据缓存空间存储的 数据时，记录访问所述数据缓存空间内的各个数据的访问时间和访问次 数；在所述数据存储空间的空闲空间小于或和等于预设阈值时，根据最 近最少使用算法，并结合所述数据缓存空间内的各个数据的访问时间和 访问次数，从所述数据缓存空间提取冷点数据；将所述冷点数据移动至 数据存储空间，并生成第一移动实务记录，将所述第一移动实务记录写 入日志存储空间，以及将在所述元数据存储空间内的冷点数据的元数据 内存储的存储地址替换为冷点数据在数据存储空间的存储地址。