[发明专利]一种面向大文件分发场景的分片缓存及重组方法

说明书

本发明涉及一种面向大文件分发场景的分片缓存及重组方法，该方法在CDN内容分发网络的各个节点中进行部署实现，用于对网站的页面、图片、视频文件、下载大文件通过缓存进行分发加速服务，旨在让终端用户能够更快速的获取到要访问的内容或文件。与现有技术相比，本发明实现了在节点收到来自客户端对相应文件的请求时，从缓存的片段中选择客户端请求的字节范围并进行重组返回等优点。

技术领域

本发明涉及一种CDN(Content Delivery Network内容分发网络)领域，尤其是涉及一种面向大文件分发场景的分片缓存及重组方法。

背景技术

在提供互联网服务的网站中大多已经使用了CDN进行网站内容的分发加速传输，以提升用户的访问体验，降低源站的负载。CDN是在传统的网络架构中，在服务器与客户端之间增加了一系列部署在不同区域的缓存节点，从而通过缓存是同区域用户快速获取内容。

在目前针对视频、软件下载等大文件的请求，客户端通常会有range请求和非range请求，CDN服务器也会根据客户端的请求类型向源站发起同样的类型的请求，但是针对range请求，CDN节点不会将请求下来的分片文件进行缓存的。

基于上述场景，在大文件分发过程中会有以下几点不足：(1)对于客户端的range请求，CDN直接转发该range请求进行回源，因range的不确定性通常节点不会对应的片段进行缓存，从而每个来自客户端的range请求都要回源获取，会造成大量的回源，回源带宽浪费；(2)即便对(1)中描述的片段进行缓存，CDN节点也无法对其再次利用，属于无意义缓存，会造成存储空间的浪费；(3)大文件完整缓存回源时间长，分发性能低，必须要做预缓存，否则分发成功率很低。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种面向大文件分发场景的分片缓存及重组方法。

本发明的目的可以通过以下技术方案来实现：

一种面向大文件分发场景的分片缓存及重组方法，该方法在CDN内容分发网络的各个节点中进行部署实现，用于对网站的页面、图片、视频文件、下载大文件通过缓存进行分发加速服务，旨在让终端用户能够更快速的获取到要访问的内容或文件。

优选地，所述的方法包括：

CDN节点收到来自客户端的文件访问请求，包括情形一：客户端请求整个文件，以及情形二：客户端进行range请求，请求文件某个片段。

优选地，所述的情形一：客户端请求整个文件，具体过程如下：

(1.1)如果当前节点已经缓存被请求文件的所有分片，则直接将这些文件分片进行重组，并返回给客户端；

(1.2)如果当前节点没有对该文件进行缓存，则该节点会进行回源；

(1.3)如果当前节点缓存了部分片段，则CDN节点会首先向源站以range请求的方式请求该文件未被缓存的片段，并进行片段重组，返回给客户端。

优选地，所述的节点会进行回源具体为：

首先节点向源站发起一个获取文件大小的请求，得到文件大小之后，当前节点会按照分片回源的配置确定将源文件分成多少个片段；

之后CDN节点会向源站发起range请求，并按照请求下来的片段进行缓存，同时将已经缓存的片段进行重组，返回给客户端。

优选地，所述的情形二：客户端进行range请求，请求文件某个片段，具体过程如下：

(2.1)如果请求的片段字节范围全部包含在当前节点已经缓存的片段中，则当前节点会从已缓存片段中截取客户端请求的片段字节范围，并进行重组，然后将重组的片段返回给客户端；