[发明专利]用于并行传输数据的方法、设备和计算机程序产品

权利要求书

1.一种用于并行传输数据的方法，包括：

获得要从第一存储设备传输到第二存储设备的数据的属性以及所述第一存储设备与所述第二存储设备之间的网络状况；

基于所述数据的所述属性和所述网络状况，确定在并行传输所述数据中使用的并发数目和数据切片大小；以及

基于所述并发数目和所述数据切片大小，在所述第一存储设备与所述第二存储设备之间并行传输所述数据。

2.根据权利要求1所述的方法，其中获得所述数据的所述属性包括：

获得所述数据的大小、所述数据中的文件数目、所述数据中的增量数据比例以及所述增量数据的离散性，所述离散性包括所述增量数据的平均区域大小、最小区域大小、最大区域大小以及总区域数目。

3.根据权利要求1所述的方法，其中获得所述网络状况包括：

获得所述第一存储设备与所述第二存储设备之间的网络带宽和网络时延。

4.根据权利要求1所述的方法，所述并发数目和所述数据切片大小的确定由机器学习模型执行，所述方法还包括：

在第三存储设备与第四存储设备之间使用不同的数据属性和网络状况来执行并行数据传输，所述第三存储设备和所述第四存储设备为测试设备；

基于所述第三存储设备与所述第四存储设备之间的并行数据传输，生成测试数据集；以及

使用所生成的测试数据集来训练所述机器学习模型。

5.根据权利要求4所述的方法，其中生成所述测试数据包括：

针对给定数据属性和给定网络状况，使用多对并发数目-数据切片大小来分别执行多次并行数据传输；

记录使用所述多对并发数目-数据切片中的每对并发数目-数据切片大小完成所述并行数据传输所使用的执行时间；

将所述多对并发数目-数据切片大小中执行时间最少的一对并发数目-数据切片大小确定为最优并发数目和数据切片大小；以及

将所述最优并发数目和数据切片大小与所述给定数据属性和所述给定网络状况相关联地存储在所述测试数据集中。

6.根据权利要求5所述的方法，其中使用所生成的测试数据集来训练所述机器学习模型包括：

使用所生成的测试数据集来训练用于确定并行传输数据中的并发数目和数据切片的决策树模型。

7.根据权利要求6所述的方法，还包括：

将经训练的所述决策树模型部署在存储系统中；

收集比所述决策树模型的推荐方案更优的用户选择方案作为新的训练数据；以及

使用所述新的训练数据来增量训练所述决策树模型。

8.根据权利要求1所述的方法，其中在所述第一存储设备与所述第二存储设备之间并行传输所述数据包括：

基于所述数据切片大小，将所述数据切分成多个数据切片；以及

基于所述并发数目，从所述第一存储设备向所述第二存储设备备份所述多个数据切片。

9.一种用于并行传输数据的设备，包括：

处理单元；以及

存储器，其耦合至所述处理单元并且存储有指令，所述指令在由所述处理单元执行时执行以下动作：

获得要从第一存储设备传输到第二存储设备的数据的属性以及所述第一存储设备与所述第二存储设备之间的网络状况；

基于所述数据的所述属性和所述网络状况，确定在并行传输所述数据中使用的并发数目和数据切片大小；以及

基于所述并发数目和所述数据切片大小，在所述第一存储设备与所述第二存储设备之间并行传输所述数据。

10.根据权利要求9所述的设备，其中获得所述数据的所述属性包括：

获得所述数据的大小、所述数据中的文件数目、所述数据中的增量数据比例以及所述增量数据的离散性，所述离散性包括所述增量数据的平均区域大小、最小区域大小、最大区域大小以及总区域数目。