[发明专利]分布式的重复数据删除系统及其处理方法

摘要

一种分布式的重复数据删除系统及其处理方法，客户端对输入文件运行重复数据删除程序，用以生成切分数据块与相应的指纹特征值；客户端向派发服务器发送具有指纹特征值的查询要求；派发服务器纪录切分数据块的储存位置；派发服务器根据指纹特征值将查询要求转发至相应的重复数据处理装置；重复数据处理装置判断指纹特征值是否已经存在；若不存在该笔指纹特征值，则重复数据处理装置根据新的指纹特征值将新的切分数据块存储至存储服务端。

主权项

一种分布式的重复数据删除系统，用以存储客户端的所产生至少一切分数据块，其特征在于，该重复数据删除系统包括：至少一存储服务端，用以存储该些切分数据块；一客户端，将一输入文件运行一重复数据删除程序，生成该些切分数据块与相应的一指纹特征值，该客户端发送具有该指纹特征值的一查询要求，并根据一存储节点信息将该切分数据块传送至该存储服务端；一重复数据处理装置，用以判断该指纹特征值是否已经存在，并根据新的该指纹特征值将新的该切分数据块指派到该存储服务端；以及一派发服务器，其纪录该输入文件的该些切分数据块的储存位置，该派发服务器根据该指纹特征值将该查询要求转发至相应的该重复数据处理装置