[发明专利]一种基于高性能存储介质的数据缓存方法及系统

说明书

本发明公开了本发明提供一种基于高性能存储介质的数据缓存方法，包括：获取缓存数据，并将缓存数据同时存储至内存缓存队列以及高性能存储介质中；建立存储于内存缓存队列的缓存数据与存储于高性能存储介质的缓存数据的映射位图；根据映射位图进行数据缓存处理。由于高性能存储介质的读写速度快，且具有掉电保护等性能，将内存缓存与高性能存储介质进行结合，将缓存数据同时缓存至内存缓存队列以及高性能存储介质中，并通过建立内存缓存队列的数据与高性能存储介质的数据的映射位图，来对数据进行缓存处理，不仅能够增加内存缓存空间，还能够提高缓存速度，保证数据完整。本发明还公开了一种基于高性能存储介质的数据缓存系统，具有上述效果。

技术领域

本发明涉及缓存技术领域，特别涉及一种基于高性能存储介质的数据缓存方法，还涉及一种基于高性能存储介质的数据缓存系统。

背景技术

缓存技术是为了解决两个交互处理单元之间由于处理速度不同而产生的速度瓶颈。在Linux系统中，读写文件时，内核为了提高读写性能与速度，会将文件在内存中进行缓存，这部分内存就是Cache Memory(缓存内存)，即使程序运行结束后，Cache Memory也不会自动释放，导致在Linux系统中程序频繁读写文件后，可用物理内存大幅度减少。导致CacheMemory存在技术问题，即在连续读写数据时，缓存空间有限，导致缓存速度降低，以及无掉电保护，容易导致下刷至物理盘的数据不一致以及数据丢失等问题。

因此，如何利用高性能存储介质增加内存缓存空间，提高缓存速度，保证数据完整是本领域技术人员需要解决的技术问题。

发明内容

本发明的目的是提供一种基于高性能存储介质的数据缓存方法，利用高性能存储介质增加内存缓存空间，提高缓存速度，保证数据完整。

本发明提供了一种基于高性能存储介质的数据缓存方法，包括：

获取缓存数据，并将所述缓存数据同时存储至所述内存缓存队列以及所述高性能存储介质中；

建立存储于所述内存缓存队列的缓存数据与存储于所述高性能存储介质的缓存数据的映射位图；

根据所述映射位图进行数据缓存处理。

优选的，在上述基于高性能存储介质的数据缓存方法中，所述根据所述映射位图进行数据缓存处理，包括：

当所述内存缓存队列被写满时，新缓存数据覆盖所述内存缓存队列中未下刷至物理盘的所述缓存数据存储，同时根据所述映射位图在所述高性能存储介质中为所述新缓存数据分配未利用空间。

优选的，在上述基于高性能存储介质的数据缓存方法中，所述根据所述映射位图进行数据缓存处理，包括：

当所述内存缓存队列的缓存数据下刷至物理盘中时，根据所述映射位图标记所述高性能缓存介质中与下刷至所述物理盘中的缓存数据对应的数据为无效数据。

优选的，在上述基于高性能存储介质的数据缓存方法中，所述根据所述映射位图进行数据缓存处理，包括：

当所述内存缓存队列所在系统掉电，且所述内存缓存队列中的缓存数据未下刷至物理盘中时，根据所述映射位图标记所述高性能缓存介质中与所述内存缓存队列中的缓存数据对应的数据为脏数据，并将所述脏数据下刷至所述物理盘中。

优选的，在上述基于高性能存储介质的数据缓存方法中，所述获取缓存数据之后，还包括：

将相邻位置的所述缓存数据进行合并；

根据预设时间内所述缓存数据的统计平均值计算数据切片宽度，按照所述数据切片宽度对合并后的缓存数据进行切片，得到数据切片。

优选的，在上述基于高性能存储介质的数据缓存方法中，所述将所述缓存数据同时存储至所述内存缓存队列以及所述高性能存储介质中之前，还包括：