[发明专利]一种存储系统非同源数据运行时IO去重的方法及系统

说明书

本发明是一种存储系统非同源数据运行时IO去重的方法及系统，涉及数据处理领域。该方法：S1、虚拟机读取数据并获取所述数据的特征码；S2、判断所述数据的特征码在专用缓存中是否存在，如果存在，进入S3；如果不存在，进入S4；S3、调取专用缓存中存储的与所述数据的特征码相对应的数据，进入S5；S4、调取镜像文件中与所述数据的特征码相对应的数据，进入S5；S5、虚拟机利用获得的数据进行工作。该系统包括：物理机系统模块、物理机缓存模块、虚拟机的镜像文件模块和虚拟机系统模块。本发明解决了在多个虚拟机同时读取各自的镜像文件时，服务器系统缓存容易达到瓶颈的问题。

技术领域

本发明涉及数据处理领域，尤其涉及一种存储系统非同源数据运行时IO去重的方法及系统。

背景技术

虚拟机使用镜像文件来模拟磁盘，镜像文件中存放虚拟机系统。不同的虚拟机，存放同一类系统的镜像文件中大部分数据是相同的。服务器系统虽然有缓存机制，但只能基于文件来缓存，而无法基于数据块来缓存。在多个虚拟机同时读取各自的镜像文件时，服务器系统缓存很容易达到瓶颈，无法对不同文件中的相同数据进行去重，同时也给存储带来了巨大压力。

发明内容

本发明的目的在于提供一种存储系统非同源数据运行时IO去重的方法及系统，从而解决现有技术中存在的前述问题。

为了实现上述目的，本发明一种存储系统非同源数据运行时IO去重的方法，采用的技术方案如下：

S1、虚拟机读取数据并获取所述数据的特征码；

S2、判断所述数据的特征码在专用缓存中是否存在，如果存在，进入S3；如果不存在，进入S4；

S3、调取专用缓存中存储的与所述数据的特征码相对应的数据，进入S5；

S4、调取镜像文件中与所述数据的特征码相对应的数据，进入S5；

S5、虚拟机利用获得到的数据进行工作。

优选地，在步骤S1前，有如下操作：

将镜像文件划分为专用区域和数据存储区域，所述数据存储区域划分为多个相同存储容量的数据块；

所述数据存储区域用于存储镜像文件中的数据；

所述专用区域用于存储所述镜像文件中的数据的特征码。

优选地，在步骤S1中，所述数据为镜像文件中已存在的数据或虚拟机写入数据。

更优选地，所述虚拟机写入数据，存在以下处理步骤：虚拟机在写入数据时，将虚拟机写入的数据存储在镜像文件的数据存储区域，同时计算所述写入数据的特征码并将得到的特征码存储到镜像文件的专用区域。

优选地，步骤S4，具体包括以下步骤：

S4-1、调取镜像文件中与所述数据的特征码相对应的数据时，将调取的数据及其特征码以内存的方式存储到专用缓存；

S4-2、专用缓存对接收到的数据及其特征码进行处理。

更优选地，所述专用缓存中存储的数据和数据的特征码是唯一的，且是一一对应的。

更优选地，所述专用缓存中存储的数据及其特征码能够供多个虚拟机共同使用。

更优选地，所述专用缓存中存储的数据及其特征码以内存方式存储。

更优选地，步骤S4-2中，所述处理包括：

①、专用缓存将接收到的数据及其特征码建立索引机制；

②、按照专用缓存存储的数据被访问的次数和被访问的时间对专用缓存中存储的数据排序；

③、专用缓存清理非热点数据。