[发明专利]网站转载数量的统计方法及装置有效
申请号: | 201510809659.6 | 申请日: | 2015-11-19 |
公开(公告)号: | CN106776609B | 公开(公告)日: | 2020-05-22 |
发明(设计)人: | 冯鸳鹤;李新国 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | G06F16/9535 | 分类号: | G06F16/9535 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 韩建伟;张永明 |
地址: | 100083 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网站 转载 数量 统计 方法 装置 | ||
1.一种网站转载数量的统计方法,其特征在于,包括:
利用爬虫爬取原创文章的转载体,得到所述原创文章的第一网站转载结果,其中,所述原创文章为在目标网站上首发的文章;
获取所述原创文章的属性信息,其中,所述属性信息包括标题信息和/或关键词信息;
根据获取的所述属性信息利用搜索引擎搜索所述原创文章的转载体,得到所述原创文章的第二网站转载结果;
合并所述原创文章的所述第一网站转载结果及所述第二网站转载结果;
其中,合并所述原创文章的所述第一网站转载结果及所述第二网站转载结果包括:删除所述原创文章的所述第二网站转载结果中与所述第一网站转载结果中的重复部分;将删除了所述重复部分的第二网站转载结果叠加到所述第一网站转载结果中;
根据获取的所述属性信息利用搜索引擎搜索所述原创文章的转载体,得到所述原创文章的第二网站转载结果包括:根据获取的所述属性信息利用搜索引擎搜索所述原创文章的转载体;对所述原创文章与其转载体进行相似度分析;根据相似度分析结果确定所述原创文章的第二网站转载结果。
2.根据权利要求1所述的方法,其特征在于,根据相似度分析结果确定所述原创文章的第二网站转载结果包括:
根据所述相似度分析结果确定出与所述原创文章的相似度大于相似度阈值的转载体;
判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间;
在判断结果为与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间晚于所述原创文章的首发时间的情况下,确定该转载体属于所述原创文章的第二网站转载结果。
3.根据权利要求2所述的方法,其特征在于,在判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间之前,所述方法还包括:
检测与所述原创文章的相似度大于所述相似度阈值的转载体是否有文章来源标识,
其中,在检测结果为与所述原创文章的相似度大于所述相似度阈值的转载体没有所述文章来源标识的情况下,判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间。
4.一种网站转载数量的统计装置,其特征在于,包括:
爬取单元,用于利用爬虫爬取原创文章的转载体,得到所述原创文章的第一网站转载结果,其中,所述原创文章为在目标网站上首发的文章;
获取单元,用于获取所述原创文章的属性信息,其中,所述属性信息包括标题信息和/或关键词信息;
搜索单元,用于根据获取的所述属性信息利用搜索引擎搜索所述原创文章的转载体,得到所述原创文章的第二网站转载结果;
合并单元,用于合并所述原创文章的所述第一网站转载结果及所述第二网站转载结果;
其中,所述合并单元包括:删除模块,用于删除所述原创文章的所述第二网站转载结果中与所述第一网站转载结果中的重复部分;叠加模块,用于将删除了所述重复部分的第二网站转载结果叠加到所述第一网站转载结果中;
所述搜索单元包括:搜索模块,用于根据获取的所述属性信息利用搜索引擎搜索所述原创文章的转载体;分析模块,用于对所述原创文章与其转载体进行相似度分析;确定模块,用于根据相似度分析结果确定所述原创文章的第二网站转载结果。
5.根据权利要求4所述的装置,其特征在于,所述确定模块包括:
第一确定子模块,用于根据所述相似度分析结果确定出与所述原创文章的相似度大于相似度阈值的转载体;
判断子模块,用于判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间;
第二确定子模块,用于在判断结果为与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间晚于所述原创文章的首发时间的情况下,确定该转载体属于所述原创文章的第二网站转载结果。
6.根据权利要求5所述的装置,其特征在于,所述确定模块还包括:
检测子模块,用于在判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间之前,检测与所述原创文章的相似度大于所述相似度阈值的转载体是否有文章来源标识,
其中,所述判断子模块还用于在检测结果为与所述原创文章的相似度大于所述相似度阈值的转载体没有所述文章来源标识的情况下,判断与所述原创文章的相似度大于所述相似度阈值的转载体的发布时间是否晚于所述原创文章的首发时间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510809659.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:时间的所属时间片段的确定方法和装置
- 下一篇:一种广告弹窗拦截方法及装置