[发明专利]一种数据上传方法及系统

摘要

本发明公开了一种数据上传方法及系统，该方法包括如下步骤，读取数据文件，对数据文件进行数据分片操作、生成数据片段，对数据片段进行完整性管理操作；通过上传数据片段的方式上传数据文件；接收到数据片段后，校验数据片段的完整性；该系统包括客户端和服务器；客户端包括读取模块、分片模块、管理模块及上传模块，服务器包括接收模块和校验模块。本发明为超级计算提供一种高效、快速的数据上传方法及系统，避免了数据重复上传的问题，有效减少了数据传输时间，极大提高了大规模数据的上传效率，进而使超算作业可以进行实时提交。

主权项

一种数据上传方法，其特征在于：该方法包括如下步骤，步骤1，读取数据文件；步骤2，对所述数据文件进行数据分片操作、生成数据片段；步骤3，对所述数据片段进行完整性管理操作；步骤4，通过上传数据片段的方式上传数据文件；步骤5，接收到所述数据片段后，校验接收到的所有数据片段的完整性。