[发明专利]一种基于决策树算法的专业实体共指消解方法在审
申请号: | 201910487123.5 | 申请日: | 2019-06-05 |
公开(公告)号: | CN110457671A | 公开(公告)日: | 2019-11-15 |
发明(设计)人: | 肖清林 | 申请(专利权)人: | 福建奇点时空数字科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F16/35;G06K9/62 |
代理公司: | 11589 北京劲创知识产权代理事务所(普通合伙) | 代理人: | 王志敏<国际申请>=<国际公布>=<进入 |
地址: | 361000福建省厦门市软件园三*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种基于决策树算法的专业实体共指消解方法,其特征在于,包括以下步骤:选取关键词搜索结果数量为P1,使用intitle指令搜索得到的结果页面数P2,搜索结果第一页中网站内页数P3,关键词在搜索结果第一页中出现的次数P4;按照关键词、P1、P2、P3和P4为一条优化数据记录,整理历史优化数据,并对相应的属性进行概化,形成训练数据集;根据训练数据集构建决策树,首先对数据集中的数据应用决策树进行预处理,并形成数据对形式;设定权重,进行相似度值计算,并将相似度值与设定的阈值进行比较。本发明具有很好的处理效果,能够满足处理海量数据中实体共指消解的需求,为实体共指消解提供了有效地保证,实用性强,易于推广。 | ||
搜索关键词: | 消解 训练数据集 搜索结果 优化数据 决策树 相似度 关键词搜索结果 预处理 决策树算法 海量数据 结果页面 数据集中 数据应用 指令搜索 专业实体 有效地 构建 内页 权重 网站 记录 保证 | ||
【主权项】:
1.一种基于决策树算法的专业实体共指消解方法,其特征在于,包括以下步骤:/nS1、选取关键词搜索结果数量为P1,使用intitle指令搜索得到的结果页面数P2,搜索结果第一页中网站内页数P3,关键词在搜索结果第一页中出现的次数P4;/nS2、按照关键词、P1、P2、P3和P4为一条优化数据记录,整理历史优化数据,并对相应的属性进行概化,形成训练数据集;/nS3、根据训练数据集构建决策树,采用C4.5算法构建出相应的决策树,该决策树等价于一系列规则;/nS4、首先对数据集中的数据应用决策树进行预处理,并形成数据对形式;/nS5、设定权重,进行相似度值计算,并将相似度值与设定的阈值进行比较;/nS6、当达到指定阈值时,进行实体统一,即对所有达到阈值的数据对融合为一条数据;/nS7、当未达到指定阈值时,则进行实体汇总,将数据对数据汇总到一起,形成一个新的数据集。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建奇点时空数字科技有限公司,未经福建奇点时空数字科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910487123.5/,转载请声明来源钻瓜专利网。