[发明专利]识别网络爬虫的方法及装置在审
| 申请号： | 201510490259.3 | 申请日： | 2015-08-11 |
| 公开（公告）号： | CN105187396A | 公开（公告）日： | 2015-12-23 |
| 发明（设计）人： | 张旭华;谭国斌;沈建荣 | 申请（专利权）人： | 小米科技有限责任公司 |
| 主分类号： | H04L29/06 | 分类号： | H04L29/06 |
| 代理公司： | 北京弘权知识产权代理事务所(普通合伙) 11363 | 代理人： | 逯长明;许伟群 |
| 地址： | 100085 北京市海淀区清*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本公开实施例公开了一种识别网络爬虫的方法及装置，该方法接收IP地址发送的访问请求，并根据该访问请求实时统计该IP地址对应的网站访问量，根据网站访问量获得该IP地址对应的访问频率；如果该IP地址的访问频率大于预设阈值，则确定该IP地址对应的用户是网络爬虫。由上述内容可知，利用该方法识别网络爬虫时，不需要分析网站服务器的日志，而是在接收到IP地址发送的访问请求时实时统计IP地址的网站访问量，从而实现快速实时地获取某个IP地址的访问频率。即实现了在网络爬虫爬取的过程中快速识别出网络爬虫，提高识别网络爬虫的实时性，进而能够快速屏蔽掉恶意的网络爬虫。 | ||
| 搜索关键词： | 识别 网络 爬虫 方法 装置 | ||
【主权项】：
一种识别网络爬虫的方法，应用于网站服务器中，其特征在于，所述方法包括：接收IP地址发送的访问请求；根据所述访问请求实时统计所述IP地址对应的网站访问量；根据所述网站访问量获取所述IP地址对应的访问频率；当所述IP地址对应的访问频率大于预设阈值时，确定所述IP地址对应的用户是网络爬虫。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于小米科技有限责任公司，未经小米科技有限责任公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201510490259.3/，转载请声明来源钻瓜专利网。
- 上一篇：一种基于云服务器的文件防伪查询方法及装置
- 下一篇：一种安全访问方法及系统
