[发明专利]一种批量CDN资源缓存自动化装置

权利要求书

1.一种批量CDN资源缓存自动化装置，其特征在于，包括软件系统，所述软件系统通过大数据技术自动分析出大流量出网域名，针对所述大流量出网域名建立批量引入任务，针对所述批量引入任务中的域名通过调用爬虫工具第一次从所述域名下爬取到第一次资源信息及其第一次资源指标数据，针对所述第一次资源信息生成CDN缓存表达式，调用CDN缓存工具按照所述CDN缓存表达式对所述第一次资源信息执行测试引入缓存操作以标明第一次测试合格资源信息，调用爬虫工具第二次爬取所述第一次测试合格资源信息，调用爬虫工具第三次爬取所述第一次测试合格资源信息，通过所述第二次爬取和所述第三次爬取确保触发所述第一次测试合格资源信息CDN缓存生效，从所述第三次爬取形成的CDN日志信息中提取缓存测试资源指标数据，对所述缓存测试资源指标数据与所述第一次资源指标数据的变化情况进行校验，调用CDN缓存工具对校验达到阈值的资源信息执行正式引入缓存操作。

2.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，所述资源指标包括首字节时延和/或下载速率。

3.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，所述校验采用的阈值为资源指标提升比率阈值。

4.根据权利要求3所述的批量CDN资源缓存自动化装置，其特征在于，所述资源指标提升比率阈值为首字节时延提升比率≥50％，和/或，下载速率≥100％。

5.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，所述通过大数据技术自动分析出大流量出网域名包括通过统一数据包深度检测DPI采集平台接口获取包含统一资源定位符URL的信令话单数据，所述信令话单数据包括 以下一种或多种字段信息：源端IP地址，目的端IP地址，URL，上行流量，下行流量，接口方式，话单类型；调用Hadoop的数据仓库工具对周期内的所述信令话单数据进行自动分析以获得大流量出网域名。

6.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，所述通过大数据技术自动分析出大流量出网域名包括以下步骤：步骤A1，数据提取；步骤A2，出网域名数据判断筛选；步骤A3，出网域名指标统计；步骤A4，输出大流量出网域名。

7.根据权利要求6所述的批量CDN资源缓存自动化装置，其特征在于，所述出网域名数据判断筛选包括以下条件：接口方式取省网出口，源地址归属于本省运营商并且目的地址归属于其他运营商，不取URL为空的数据，取URL主机映射为域名的数据而不取主机映射为IP的数据；所述出网域名指标统计包括以下各项技术要求：按域名将取上行流量、下行流量并分别求和，计算总流量＝上行流量+下行流量，统计数据条数作为点击次数；所述输出大流量出网域名包括以下确定方式：按总流量取TOP1000的域名数据。

8.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，在所述建立批量引入任务之前包括以下判断步骤：判断域名是否已CDN缓存，若是则不做CDN测试缓存处理，若否则按域名建立批量引入任务；所述判断步骤还能够另外接收人工获取的批量域名，所述人工获取包括合作或任务方式获取。

9.根据权利要求1所述的批量CDN资源缓存自动化装置，其特征在于，所述第一次资源信息包括域名的资源路径及其是否支持缓存，所述第一次资源指标数据包括首字节时延和下载速率数据，所述生成CDN缓存表达式包括以下步骤：步骤B1，分析爬虫数据；步骤B2，判断资源路径是否支持缓存，若否则不做处理，若是则进入步骤B3；步骤B3，调用安全审计工具；步骤B4，抓帧匹配判断资源内容是否安全，若否则不做处理，若是则进入步骤B5；步骤B5，使用正则表达式截取资源路径的域名和后缀；步骤B6，判断资源路径是否已全部处理，若否则返回步骤B1，若是则进入步骤B7；步骤B7，根据生成的正则表达式拼装报文；步骤B8，输出缓存表达式。