[发明专利]基于网络的不限长度的文件传输方法和系统

说明书

技术领域

本发明涉及通信技术领域，尤其涉及一种基于网络的不限长度的文件传输方法和系统。

背景技术

中国艺术品数据库(简称中艺库)平台负责雅昌深圳、北京、上海三大运营中心的数据存储与管理，通过专线传输北京主数据库，平台涉及资源与数据类型较多，各资源间相互关联且数量巨大。每天上海、深圳有200-400G的海量的数据传输到北京主数据库，特别是非结构化文件数据较大，作品图片1:1原大尺寸的复制级的单张图片会在1GB左右，对于长卷如《清明上河图》的图片最大高达15个GB以上，出版级的图片基本在15-150M，因此大数据的文件传输入库与异地备份必须保证是准确的、无损的、安全的和高效的。

发明内容

本发明的实施例提供了一种基于网络的不限长度的文件传输方法和系统，以实现高效率地通过网络异地传输文件。

为了实现上述目的，本发明采取了如下技术方案。

根据本发明的一个方面，提供了一种基于网络的不限长度的文件传输方法，包括：

在发送端按照设定的文件分割长度对文件进行分割，得到所述文件的多个分割块；

根据每个分割块的数据和序列号，采用数字签名形式的算法生成每个分割块的独立验证代码文件，所述独立验证代码文件作为每个分割块是否完整无损的验证依据；

所述发送端将每个分割块的数据、序列号和独立验证代码文件传输给接收端。

优选地，所述的在发送端按照设定的文件分割长度对文件进行分割，得到所述文件的多个分割块，包括：

在发送端，获取文件F的字节长度L，设定一个固定的文件分割长度T，按照所述文件分割长度T对L进行等比例分割，得到文件F的各个分割块：B₁，B₂…B_N，分割块的总数为N；

如果L不是T的整数倍，则L＝(N-1)*T+Len(B_N)

如果L是T的整数倍，则L＝N*T。

优选地，所述的根据每个分割块的数据和序列号，采用数字签名形式的算法生成每个分割块的独立验证代码文件，包括：

选取初始序列号i＝1；

根据分割块B_i的数据X_i和序列号i，采用数字签名形式的算法生成独立验证代码文件C_i＝V(X_i，i)，所述V表示数字签名形式的算法，所述独立验证代码文件C_i的文件长度为固定长度；

序列号i加1，根据分割块B_i+1的数据X_i+1和序列号i+1，采用数字签名形式的算法生成独立验证代码文件C_i+1＝V(B_i+1，i)，计算出分割块B_i+1对应的C_i+1；

重复执行上述处理过程，直到序列号等于N，所有分割块的独立验证代码文件都生成了。

优选地，所述的发送端将每个分割块的数据、序列号和独立验证代码文件传输给接收端，包括：

所述发送端把分割块的总数N传递到接收端；

选取初始序列号i＝1；

所述发送端将分割块B_i的序列号i、数据X_i和独立验证代码文件C_i传输给接收端；

序列号i加1；

所述发送端将分割块B_i+1的序列号i+1、数据X_i+1和独立验证代码文件C_i+1传输给接收端；

重复执行上述处理过程，直到序列号等于N，所有分割块的序列号、数据和独立验证代码文件都传输给接收端。

优选地，所述的方法还包括：

所述接收端接收所述发送端传输过来的分割块的总数N；

所述接收端接收到所述发送端发送过来的分割块B_i的序列号i、数据X_i和独立验证代码文件C_i后，采用和所述发送端相同的数字签名形式的算法V生成独立验证代码文件TC_i＝V(X_i，i)，将所述TC_i和所述C_i进行比较，如果比较结果为一致，则确定所述分割块B_i的数据X_i有效；