[发明专利]一种数据存储方法及系统、数据校验方法及系统

说明书

本发明提供一种数据存储方法及系统、数据校验方法及系统，将源数据文件分成大小均为p的n个数据块文件；根据所述源数据文件通过校验算法生成校验特征码；设置所述数据块文件的文件名包括源数据标识、校验特征码和数据块文件编号；根据所述数据块文件生成数据块文件副本；将所述数据块文件和所述数据块文件副本分别存储在光存储设备中的不同分布节点下。本发明可以通过对数据块文件的文件名进行命名设置以及数据块文件副本的存储，实现对源数据文件的完整性校验、准确性校验和一致性校验。

技术领域

本发明涉及数据校验技术领域，更具体地，涉及一种数据存储方法及系统、数据校验方法及系统。

背景技术

常用的数据校验技术，是基于块设备、SAN设备、NAS设备等分布式存储设备，缺少对系统级的大容量光存储系统的数据校验技术。

块设备是将数据存储在固定大小的块中，每个块都有自己的地址而且每个块都能独立于其它块而读写的存储设备。SAN(Storage Area Network，存储区域网络)设备是通过FC(Fibre Channel，网状通道)交换机连接存储设备和服务器，建立一个专用存储网络，而NAS(Network Attached Storage：网络附属存储)设备则是利用现有的以太网连接存储设备和服务器。SAN设备和NAS设备均允许独立地增加存储容量，也允许任何服务器连接到任何存储设备，这样不管数据放在哪里，服务器都可以直接存取所需的数据。

目前已有的大容量光存储系统主要有光盘库、光盘塔和光盘阵列三种。光盘库是由光盘驱动器、盘槽架、机械手和定位系统组成。光盘塔的物理结构为多个光盘驱动器通过SCSI总线和SCSI适配器与主机相连接，逻辑结构为光盘上的数据不分块，每个光盘上的数据都是完整的。光盘阵列的物理结构与光盘塔相同，但逻辑结构不相同，光盘阵列的数据分块存放在所有的数据光盘上，并且具有校验盘。

对于大容量光存储系统，需要进行所存储数据的完整性校验和准确性校验。而对于分布式的大容量光存储系统，由于服务器故障和并行存储等情况的存在，需要将一个数据生成多份并存储在不同分布节点下的服务器中，而同一个数据的多个副本之间可能存在不一致的情况，所以还需要进行其一致性校验。

发明内容

本发明旨在克服上述现有技术的至少一种缺陷(不足)，提供一种数据存储方法及系统、数据校验方法及系统，通过对数据块文件的文件名进行命名设置以及数据块文件副本的存储，实现对源数据文件的完整性校验、准确性校验和一致性校验。

本发明采取的技术方案是：

一种数据存储方法，包括以下步骤：

将源数据文件分成大小均为p的n个数据块文件，n为大于或等于1的整数；

根据所述源数据文件通过校验算法生成校验特征码；

设置所述数据块文件的文件名包括源数据标识、校验特征码和数据块文件编号；

根据所述数据块文件生成数据块文件副本；

将所述数据块文件和所述数据块文件副本分别存储在光存储设备中的不同分布节点下。

源数据标识可以标识这些数据块文件是由哪个源数据文件划分出的，校验特征码可以唯一标识和验证源数据文件，数据块文件编号是由同一个源数据文件划分出的不同数据块文件之间的区分标识。

通过数据块文件的文件名可以对源数据文件进行完整性和准确性的校验。

当需要校验源数据文件的完整性时，先根据源数据标识获取该待校验的源数据文件对应的数据块文件，然后解析该数据块文件的文件名得到数据块文件编号，根据数据块文件编号是否连续即可判断待校验的源数据文件是否有缺失。