[发明专利]一种文件存储网关系统及其数据迁移方法

说明书

本发明涉及一种文件存储网关系统及其数据迁移方法，其中，该系统包括文件协议模块、文件日志模块和文件同步模块，文件协议模块分别与业务端、文件存储系统、文件日志模块和文件同步模块相连接，文件日志模块还与文件同步模块相连接，文件同步模块还与非结构化数据管理系统相连接，文件协议模块用于提供多种传统文件访问协议；文件日志模块用于存储文件读写操作日志；文件同步模块用于进行文件存储系统与非结构化数据管理系统之间的异步数据复制操作，以及将文件数据从文件存储系统迁移至非结构化数据管理系统。与现有技术相比，本发明通过解耦业务端IO和异步复制数据IO，在不影响业务端性能的前提下，能够保证数据迁移的完整性。

技术领域

本发明涉及文件存储技术领域，尤其是涉及一种文件存储网关系统及其数据迁移方法。

背景技术

传统常采用NAS(Network Attached Storage，网络附属存储)或SAN(StorageArea Network，存储区域网络)对海量文件进行存储，且由这些文件存储设备挂载给业务系统所在的服务器，以提供业务系统的后端存储，然而这些文件存储设备的扩展性较差、难以进行维护。

为此，目前有利用非结构化数据管理系统(如：文档云)对原文件存储设备中的文件数据进行统一管理，此时，原文件存储设备上面的海量文件需要迁移到非结构化数据管理系统中，同时原来的业务系统所需的存储服务又不能中断。但在实际迁移过程中，由于受待迁移的文件数量及容量、非结构化数据管理系统的性能、网络带宽、原存储设备性能的影响，导致迁移总时间过长。

如果先停止业务系统访问，再迁移，迁移完成之后，最后让业务系统继续访问非结构化数据管理系统，此方案在海量文件下，迁移时间可能会持续数个月，且业务系统会停机数月。

如果不停止业务，边迁移边使用原存储设备，则会发生漏迁移现象，为了防止漏迁移，可能需要反复迁移来减少漏迁文件的数量，但是在实际情况中，还是可能存在某些重命名或删除等特殊场景下，不可避免地会漏迁移一些文件，或者多迁移一些文件。即使迁移完毕了，这些业务系统大部分使用的原文件存储访问方式，而非结构化数据管理系统通常会有自己的私有访问协议，若想让这些业务系统访问非结构化数据管理系统的私有访问协议，就需要重新改造业务系统，而业务系统的改造存在长期无人维护、改造访问方式困难以及改造代价大的问题。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种文件存储网关系统及其数据迁移方法，利用非结构化数据管理系统的传统文件协议网关，以替代原文件存储设备，同时可作为原文件存储设备到非结构化数据管理系统的在线迁移系统，无需改造业务系统，能够在不影响业务系统性能的前提下，实现数据无缝透明迁移，且能保证数据迁移的完整性。

本发明的目的可以通过以下技术方案来实现：一种文件存储网关系统，包括文件协议模块、文件日志模块和文件同步模块，所述文件协议模块分别与业务端、文件存储系统、文件日志模块和文件同步模块相连接，所述文件日志模块还与文件同步模块相连接，所述文件同步模块还与非结构化数据管理系统相连接，其中，所述文件存储系统为文件协议模块的缓存系统，

所述文件协议模块用于提供多种传统文件访问协议；

所述文件日志模块用于存储文件读写操作日志；

所述文件同步模块用于进行文件存储系统与非结构化数据管理系统之间的异步数据复制操作，以及将文件数据从文件存储系统迁移至非结构化数据管理系统。

进一步地，所述文件协议模块设置有文件读写接口和目录读写接口。