[发明专利]转发器、分布式文件传输方法、系统、介质及电子设备

说明书

本发明实施例提供了一种转发器、分布式文件传输方法、系统、计算机可读介质及电子设备，涉及无线通信技术领域。分布式文件传输方法包括：接收由所述第二数据中心所在地域的业务机发出的下载请求；判断所述第二数据中心是否存在所述下载请求对应的下载文件；在所述第二数据中心不存在所述下载请求对应的下载文件时，根据聚合后的所述下载请求从所述第一数据中心下载文件并存储到所述第二数据中心。本发明实施例的技术方案通过聚合下载请求的方式减少了文件的跨机房传输，实现了数据快速同步，提高了业务部署速度。

技术领域

本发明涉及无线通信技术领域，具体而言，涉及一种转发器、分布式文件传输方法、系统、计算机可读介质及电子设备。

背景技术

随着互联网公司的规模不断扩大，一些互联网公司开始实施异地多活的互联网数据中心机房部署方案，即互联网公司在多地建设互联网数据中心机房。

例如，某互联网公司的业务系统在在部署在城市A的A机房的基础上，为提升城市B所在区域的电信用户访问速度，降低机房成本，开始在城市B部署B机房。在B机房部署过程中，A网络和B网络建立AB专线实现连接，B大量业务机器同时通过AB专线从A数据中心下载数据，对专线带宽依赖特别大，成本高，下载速度很缓慢，导致业务部署及更新较慢，运维上线会耗费大量工时。在AB专线成本高、带宽低、网络延时大的恶劣条件下，由于业务系统庞大，对各种数据依赖性比较强，因此从A机房同步数据确是必要的。

在大数据时代，把数据完全在B机房同步一份或者两地双写都是不现实的。因此，如何减少数据的跨机房传输是目前需要解决的技术问题。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本发明实施例的目的在于提供一种转发器、分布式文件传输方法、系统、介质及电子设备，进而至少在一定程度上减少数据的跨机房传输。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明实施例的第一方面，提供了一种分布式文件传输方法，设置第一数据中心和第二数据中心，所述第二数据中心从所述第一数据中心下载文件，所述方法包括：接收由所述第二数据中心所在地域的业务机发出的下载请求；判断所述第二数据中心是否存在所述下载请求对应的下载文件；在所述第二数据中心不存在所述下载请求对应的下载文件时，根据聚合后的所述下载请求从所述第一数据中心下载文件并存储到所述第二数据中心。

上述方案中，所述方法还包括：在所述第二数据中心存在所述下载请求对应的下载文件时，从所述第二数据中心下载所述下载文件。

上述方案中，在所述第二数据中心不存在所述下载请求对应的下载文件时，所述方法还包括：向所述业务机发送告知所述业务机稍后下载的告知信息。

上述方案中，所述根据聚合后的所述下载请求从所述第一数据中心下载文件并存储到所述第二数据中心，包括：根据所述下载请求生成key值和value值，所述key值包括所述下载请求的url摘要，所述value值包括所述下载请求的url数据；将所述key值和value值存储到key-value数据库；每隔设定的第一时间根据所述key-value数据库中不同key值对应的value值，从所述第一数据中心下载文件。

上述方案中，所述根据聚合后的所述下载请求从所述第一数据中心下载文件并存储到所述第二数据中心，包括：根据所述下载请求生成key值和value值，所述key值包括所述下载请求的url摘要，所述value值包括所述下载请求的url数据；根据所述key值和所述value值从所述第一数据中心下载文件，并将下载到的文件保存到所述第二数据中心。