[发明专利]用于并行传输数据的方法、设备和计算机程序产品在审
申请号: | 201910657308.6 | 申请日: | 2019-07-19 |
公开(公告)号: | CN112241240A | 公开(公告)日: | 2021-01-19 |
发明(设计)人: | 张宇霆;林超;彭飞 | 申请(专利权)人: | 伊姆西IP控股有限责任公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/14;G06N20/00;G06K9/62;H04L29/08 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 赵林琳;丁君军 |
地址: | 美国马*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 并行 传输 数据 方法 设备 计算机 程序 产品 | ||
本公开的实施例涉及一种用于并行传输数据的方法、设备和计算机程序产品。方法包括获得要从第一存储设备传输到第二存储设备的数据的属性以及第一存储设备与第二存储设备之间的网络状况。方法还包括基于数据的属性和网络状况来确定在并行传输数据中使用的并发数目和数据切片大小,然后使用所确定的并发数目和数据切片大小来在第一存储设备与第二存储设备之间并行传输数据。本公开的实施例在并行传输数据时,能够根据实际场景中要传输的数据的属性和实际网络状况,来选择恰当的并发数目和数据切片大小,由此能够提高并行传输数据的速度。
技术领域
本公开的实施例总体上涉及数据存储领域,并且更具体地涉及用于并行传输数据的方法、设备以及计算机程序产品。
背景技术
存储系统是指存放程序和数据的各种存储设备、控制部件及管理信息调度的硬设备和各种软件所组成的系统,其通常能够存储大量数据。为了保证数据存储的安全性,存储系统中通常采用数据备份技术。独立盘冗余阵列是一种数据备份技术,其能够把多个独立的物理盘按不同的方式组合起来形成一个盘的阵列(即,逻辑盘),从而提供比单个盘更高的存储性能和更高的可靠性能。
数据传输是现代数据保护解决方案的一项关键指标,尤其是在大规模数据集中。数据传输的效率是数据备份、数据复制、灾难恢复等的重要因素。通常,可以利用数据复制和虚拟合成的技术来避免传输重复的数据。此外,还可以通过并行数据传输来提高传输速度,并行数据传输是指充分利用网络带宽,将待传输的数据分成若干切片,并建立多个流以并行传输这些切片。
发明内容
本公开的实施例提供了一种用于并行传输数据的方法、设备和计算机程序产品,能够根据实际场景中要传输的数据的属性和实际网络状况,选择并行数据传输期间所使用的恰当的并发数目和数据切片大小,由此能够提高并行传输数据的速度。
在本公开的一个方面,提供了一种用于并行传输数据的方法。该方法包括:获得要从第一存储设备传输到第二存储设备的数据的属性以及第一存储设备与第二存储设备之间的网络状况;基于数据的属性和网络状况,确定在并行传输数据中使用的并发数和数据切片大小;以及基于并发数和数据切片大小,在第一存储设备与第二存储设备之间并行传输数据。
在本公开的另一方面,提供了一种用于并行传输数据的设备。该设备包括处理单元以及存储器,其中存储器被耦合至处理单元并且存储有指令。所述指令在由处理单元执行时执行以下动作:获得要从第一存储设备传输到第二存储设备的数据的属性以及第一存储设备与第二存储设备之间的网络状况;基于数据的属性和网络状况,确定在并行传输数据中使用的并发数和数据切片大小;以及基于并发数和数据切片大小,在第一存储设备与第二存储设备之间并行传输数据。
在本公开的又一方面,提供了一种计算机程序产品。该计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括计算机可执行指令,所述计算机可执行指令在被执行时使得计算机执行根据本公开的实施例的方法或过程。
提供发明内容部分是为了简化的形式来介绍对概念的选择,它们在下文的具体实施方式中将被进一步描述。本发明内容部分无意标识本公开的关键特征或主要特征,也无意限制本公开的各个实施例的范围。
附图说明
通过结合附图对本公开示例性实施例进行更详细的描述,本公开的上述以及其它目的、特征和优势将变得更加明显,其中在本公开示例性实施例中,相同的附图标记通常代表相同的元素。
图1示出了根据本公开的实施例的并行传输数据的环境的示意图;
图2示出了根据本公开的实施例的用于并行传输数据的方法的流程图;
图3示出了根据本公开的实施例的使用测试设备来生成测试数据的过程的示意图;
图4示出了根据本公开的实施例的用于训练决策树模型的方法的流程图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于伊姆西IP控股有限责任公司,未经伊姆西IP控股有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910657308.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种特征提取方法及装置
- 下一篇:一种数字资产认证处理平台及方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置