[发明专利]基于DOM节点文本密度的网页核心块确定方法无效
| 申请号： | 201110096132.5 | 申请日： | 2011-04-18 |
| 公开（公告）号： | CN102184189A | 公开（公告）日： | 2011-09-14 |
| 发明（设计）人： | 孙飞;宋丹丹;廖乐健;王晓华 | 申请（专利权）人： | 北京理工大学 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 100081 北京市*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种基于DOM节点文本密度的网页核心块确定方法，包括以下步骤：一、解析HTML网页，生成DOM树，使每一个HTML标签对应于DOM树中的一个节点，网页中的文字内容则是DOM树的叶子节点；二、为每个节点添加包含节点所包含的所有文本字符的个数、节点所包含的所有标签的个数、节点所包含的所有超链接文本字符个数、节点所包含的所有超链接个数的统计信息，并根据统计信息定义节点的文本密度；三、根据DOM树中节点的文本密度确定网页核心块。本发明可以在免受网页代码风格的影响及保留原始网页DOM结构的前提下，完整地提取出网页中的核心内容块。 | ||
| 搜索关键词： | 基于 dom 节点 文本 密度 网页 核心 确定 方法 | ||
【主权项】：
1.一种基于DOM节点文本密度的网页核心块确定方法，包括以下步骤：步骤一、解析HTML网页，生成DOM树，使每一个HTML标签对应于DOM树中的一个节点，网页中的文字内容则是DOM树的叶子节点；步骤二、为每个节点添加4个统计信息：(1)Chars：节点所包含的所有文本字符的个数；(2)Tags：节点所包含的所有标签的个数；(3)LinkChars：节点所包含的所有超链接文本字符个数；(4)LinkTags：节点所包含的所有超链接个数；对于每一个节点，定义其文本密度如下：若i是网页中的一个标签，即i对应于DOM树中的一个节点，则标签i的文本密度为：TD i = C i T i log log ( C i ⫬ LC i LC i + LC b C b C i + e - 1 ) ( C i LC i T i LT i ) ![]()
表示标签i所含的所有非超链接字符的个数即Chars与LinkChars的差值；LTi表示标签i对应的LinkTags，LCb表示<body>标签对应的LinkChars；Cb表示<body>标签对应的Chars；步骤三、根据DOM树中节点的文本密度确定网页核心块。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京理工大学，未经北京理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201110096132.5/，转载请声明来源钻瓜专利网。
- 上一篇：双缸风冷中型超静音汽油发电机组
- 下一篇：可以电加热的陶器、瓷器
