[发明专利]通过存储设备迁移信息

说明书

诸如可连接网络的数据传输设备之类的设备可被配置来在集群中操作以协调数据的存储。可生成第一清单，所述第一清单盘点从数据源成功传输到所述数据传输设备的第一数据集。可生成第二清单，所述第二清单盘点从所述数据传输设备成功传输到数据目的地的第二数据集。可将所述第一清单与所述第二清单进行比较以确定一个或多个数据对象的传输状态。所述传输状态可指示已成功从所述数据源传输到所述数据目的地的一个或多个数据对象。可根据所述传输状态来处理所述一个或多个对象。

相关申请的交叉引用

本申请要求2017年3月29日提交的名称为“MIGRATION OF INFORMATION VIASTORAGE DEVICES”的美国专利申请号15/473,475和2017年3月29日提交的名称为“MANIFEST GENERATION FOR DATA TRANSFERS”的美国专利申请号15/473,479的权益，其公开内容以引用方式整体并入本文。

背景技术

数据存储容量和数据用户需求的增长已经远远超过了网络数据传输带宽。比如，大规模数据集(例如“大数据”)可能包含如此庞大或复杂的数据集合，以至于传统的数据传输解决方案无法高效地或有效地传输它们。将大规模数据集从源目的地移动到数据存储系统上的过程可能会消耗大量资源和/或涉及风险。例如，数据集的大小可能使得通过网络进行数据传输是不切实际的。另外，由于数据集的大小或复杂性，可能难以确定整个数据集是否已成功地从源位置传输或复制到数据存储系统上。确定数据集是否已成功传输到最终目的地处的数据存储位置也可能很有挑战性，尤其是在以避免至少部分传输使用任何计算机网络的方式传输数据时。

附图说明

各种技术将参考附图来描述，在附图中：

图1示出在其中可实践各种实施方案的环境；

图2示出在其中可实践各种实施方案的环境的说明性示例；

图3示出根据各种实施方案的可连接网络的数据传输设备的说明性示例；

图4示出根据各种实施方案的数据传输清单的说明性示例；

图5示出用于向数据传输设备传输数据对象和从数据传输设备传输数据对象的过程的说明性示例；

图6示出由在数据传输设备上操作的传输设备服务执行的用于盘点和传输数据对象的过程的说明性示例；

图7示出由服务提供方执行的用于从数据传输设备接收和存储数据对象的过程的说明性示例；

图8示出由集群服务执行的用于基于清单来处理数据对象的说明性过程；

图9示出用于在客户端位置处和服务提供方位置处处理数据传输的环境；并且

图10示出在其中可实现各种实施方案的环境。

具体实施方式

本文描述和建议的技术涉及利用可连接网络的数据传输设备(其可被配置在集群中)将大规模数据集从一个位置以物理方式运输到另一个位置。在一个示例中，可连接网络的数据传输设备的可连接网络的集群可被配置，以使得设备彼此通信并互相传输数据。设备集群可指被配置来一起操作(诸如协同操作以存储数据)的多个设备。例如，设备集群可用于提供超出单个存储设备能够提供的扩展的数据存储和/或处理能力和/或通过存储多个副本和/或通过使用冗余(例如，擦除)编码进行存储来提供持久性。与集群的操作相关的数据和元数据可在集群设备之间分布。本文描述的设备可以是可连接网络的数据传输设备。