[发明专利]桥接装置及提供接近存储计算的方法

说明书

本发明提供一种桥接装置及提供接近存储计算的方法。所述桥接装置包括：第一接口，被配置成从在主机计算机上运行的应用接收第一组命令；一个或多个命令处理器，所述一个或多个命令处理器中的每一者被配置成对所述第一组命令进行转换并基于所述第一组命令产生第二组命令；第二接口，被配置成将所述第二组命令提供到数据存储装置；以及计算处理器，被配置成在运行所述应用的同时发出内部命令来以对于所述主机计算机而言不可知的方式在后台模式中从所述数据存储装置提取数据以及向所述数据存储装置写入数据。本发明的接近存储计算及存储器内加速使得能够以高效方式在后台对大量数据进行处理。

[相关申请的交叉参考]

本申请主张在2017年10月11日提出申请的序列号为第62/571,064号及第62/571,061号的美国临时专利申请的权利及优先权，所述美国临时专利申请的公开内容全文并入本申请供参考。

技术领域

本公开大体来说涉及数据存储系统，且更具体来说，涉及一种使用桥接装置提供接近存储计算的系统及方法。

背景技术

固态驱动器(solid-state drive，SSD)正快速地取代传统的存储装置(例如，硬盘驱动器(hard disk drive，HDD)迅速变成现代数据中心基础设施的主要存储元件。SSD提供低延迟、高数据读取/写入吞吐量及对用户数据的可靠的持久存储。基于网络结构的非易失性存储快速(non-volatile memory express，NVMe)(NVMe over fabric，NVMe-oF)是新兴的技术，其使得成百上千的SSD能够通过网络结构网络(fabric network)(例如，以太网、光纤信道及无限宽频(Infiniband))进行连接。

NVMe-oF协议能够实现远程直接附接存储(remote direct-attached storage，rDAS)，所述远程直接附接存储使得大量的NVMe SSD能够通过所建立的网络结构网络连接到远程主机。NVMe-oF协议还支持远程直接存储器存取(remote direct memory access，RDMA)以提供可靠的传送服务来通过网络载送NVMe命令、数据及响应。iWARP、RoCE v1及RoCE v2是提供RDMA服务的传送协议的一些实例。

使用分解数据存储装置(disaggregated data storage device)(例如，NVMe-oF-可兼容SSD，在本文中也称为NVMe-oF SSD或缩写为eSSD)的数据存储系统可为在主机计算机上运行的应用提供大的存储容量。所述应用可从分解数据存储装置收集大量数据(大数据)并对它们进行分析。

由于大数据处理的规模非常大，因此用于执行有意义的大数据挖掘的基础设施可能成本过高，需要大量计算资源、大的系统存储器、高带宽网络以及用于存储所述大数据的大的及高性能的数据存储装置。期望将一些数据处理挖掘任务从主机计算机卸载到数据存储装置并使从数据存储装置到主机计算机的数据移动最小化。

发明内容

根据一个实施例，一种桥接装置包括：第一接口，被配置成从在主机计算机上运行的应用接收第一组命令；一个或多个命令处理器，所述一个或多个命令处理器中的每一者被配置成对所述第一组命令进行转换并基于所述第一组命令产生第二组命令；第二接口，被配置成将所述第二组命令提供到数据存储装置；以及计算处理器，被配置成在运行所述应用的同时发出内部命令来以对于所述主机计算机而言不可知的方式在后台模式中从所述数据存储装置提取数据以及向所述数据存储装置写入数据。

根据另一个实施例，一种提供接近存储计算的方法包括：通过第一接口从在主机计算机上运行的应用接收第一组命令；对所述第一组命令进行转换并基于所述第一组命令产生第二组命令；通过第二接口将所述第二组命令提供到数据存储装置；以及在运行所述应用的同时，发出内部命令来以对于所述主机计算机而言不可知的方式在后台模式中从所述数据存储装置提取数据及向所述数据存储装置写入数据。