[发明专利]基于CDN的网页内容感知系统及方法有效
申请号: | 201410727791.8 | 申请日: | 2014-12-03 |
公开(公告)号: | CN104536972B | 公开(公告)日: | 2018-08-14 |
发明(设计)人: | 鄂海红;宋美娜;郑聪;王赟;李川;潘昊;宋俊德 | 申请(专利权)人: | 北京邮电大学;博元森禾信息科技(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张大威 |
地址: | 100876 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种基于CDN的网页内容感知系统包括数据获取模块、数据管理模块、处理模块和控制器。数据获取模块用于采集日志数据。数据管理模块包括第一存储模块,第一存储模块存储有索引表,索引表包括特定互联网内容提供商的预定URL及其对应的预定页面结构。控制器用于控制数据获取模块采集日志数据,并控制处理模块从日志数据中提取出URL及相关参数;控制器还用于控制处理模块根据预定URL从URL中筛选出目的URL,以及控制处理模块根据预定页面结构对目的URL的页面结构进行分析以感知网页的特征词。本发明的基于CDN的网页内容感知系统具有全面的、实时性高、通用性强的特点。本发明还提出一种基于CDN的网页内容感知方法。 | ||
搜索关键词: | 网页内容 控制处理模块 感知系统 日志数据 页面结构 控制器 数据管理模块 数据获取模块 存储模块 索引表 感知 互联网内容提供商 采集 处理模块 获取模块 控制数据 通用性强 相关参数 实时性 特征词 存储 网页 筛选 分析 | ||
【主权项】:
1.一种基于CDN的网页内容感知系统,其特征在于,包括:数据获取模块,所述数据获取模块用于采集日志数据;数据管理模块,所述数据管理模块包括第一存储模块,所述第一存储模块存储有索引表,所述索引表包括特征互联网内容提供商的预定URL(uniform resource locator)及预定URL对应的网页的预定页面结构;处理模块,所述处理模块从所述日志数据中提取出URL及相关参数,根据所述预定URL从所述URL中筛选出目的URL,并根据所述预定页面结构对所述目的URL的页面结构进行分析以感知所述网页的特征词,并根据所述特征词在网页中的不同权重,综合计算出所述特征词的贡献权重,作为感知结果;以及控制器,用于控制所述数据获取模块采集日志数据,并控制所述处理模块从所述日志数据中提取出所述URL及相关参数;所述控制器,还用于控制所述处理模块根据所述预定URL从所述URL中筛选出目的URL,以及控制所述处理模块根据所述预定页面结构对所述目的URL的页面结构进行分析以感知所述网页的特征词。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学;博元森禾信息科技(北京)有限公司,未经北京邮电大学;博元森禾信息科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410727791.8/,转载请声明来源钻瓜专利网。