[发明专利]网站目录检测方法、装置、计算机设备及计算机存储介质在审
申请号: | 201910977126.7 | 申请日: | 2019-10-15 |
公开(公告)号: | CN110929185A | 公开(公告)日: | 2020-03-27 |
发明(设计)人: | 张益宁 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955;G06F16/951 |
代理公司: | 深圳市赛恩倍吉知识产权代理有限公司 44334 | 代理人: | 刘丽华;孙芬 |
地址: | 518000 广东省深圳市福田区益田路503*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网站 目录 检测 方法 装置 计算机 设备 存储 介质 | ||
1.一种网站目录检测方法,其特征在于,所述方法包括:
通过搜索引擎对目标网站的给定关键词进行搜索,得到多个第一URL;
从所述第一URL开始进行网页爬取,得到第二URL;
对所述第二URL进行数据清洗,得到第三URL;
对所述第三URL中的资源名进行解析,得到所述第三URL的URL参数和资源路径,根据所述URL参数、资源路径和预定文件类型生成网站目录检测字典;
根据所述网站目录扫描字典对所述第三URL进行扩展,得到第四URL;
通过混合多重匿名代理池对所述第四URL进行扫描;
根据所述第四URL的扫描结果确定所述第四URL是否为敏感目录或敏感文件。
2.如权利要求1所述的方法,其特征在于,所述通过搜索引擎对目标网站的给定关键词进行搜索包括:
通过所述搜索引擎的高级搜索功能限定搜索条件和/或搜索范围,对所述给定关键词进行搜索。
3.如权利要求1所述的方法,其特征在于,所述对所述第二URL进行数据清洗包括:
将所述第二URL中的重复URL删除;和/或
将所述第二URL中的友情URL过滤。
4.如权利要求1所述的方法,其特征在于,所述根据所述URL参数、资源路径和预定文件类型生成网站目录检测字典包括:
根据所述URL参数和资源路径生成第一键值对;
根据所述预定文件类型生成第二键值对;
根据所述第一键值对、第二键值对生成所述网站目录检测字典。
5.如权利要求1所述的方法,其特征在于,所述混合多重匿名代理池包括普通http代理池和高匿代理池。
6.如权利要求1所述的方法,其特征在于,所述根据所述第四URL的扫描结果确定第四URL是否为敏感目录或敏感文件包括:
判断所述第四URL的返回值是否为预设值;
若所述返回值为预设值,确定第四URL为敏感目录或敏感文件。
7.如权利要求1-6中任一项所述的方法,其特征在于,所述方法还包括:
输出所述目标网站的检测结果。
8.一种网站目录检测装置,其特征在于,所述装置包括:
搜索模块,用于通过搜索引擎对目标网站的给定关键词进行搜索,得到多个第一URL;
爬取模块,用于从所述第一URL开始进行网页爬取,得到第二URL;
清洗模块,用于对所述第二URL进行数据清洗,得到第三URL;
生成模块,用于对所述第三URL中的资源名进行解析,得到所述第三URL的URL参数和资源路径,根据所述URL参数、资源路径和预定文件类型生成网站目录检测字典;
扩展模块,用于根据所述网站目录扫描字典对所述第三URL进行扩展,得到第四URL;
扫描模块,用于通过混合多重匿名代理池对所述第四URL进行扫描;
确定模块,用于根据所述第四URL的扫描结果确定所述第四URL是否为敏感目录或敏感文件。
9.一种计算机设备,其特征在于,所述计算机设备包括处理器,所述处理器用于执行存储器中存储的计算机程序以实现如权利要求1-7中任一项所述网站目录检测方法。
10.一种计算机存储介质,所述计算机存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述网站目录检测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910977126.7/1.html,转载请声明来源钻瓜专利网。