[发明专利]地图服务的防爬取方法有效

专利信息
申请号: 202210284863.0 申请日: 2022-03-22
公开(公告)号: CN114584390B 公开(公告)日: 2023-02-17
发明(设计)人: 陈田田;王强 申请(专利权)人: 重庆师范大学;重庆市规划和自然资源调查监测院
主分类号: H04L9/40 分类号: H04L9/40;H04L47/20;G06F21/60;G06F21/31
代理公司: 重庆天成卓越专利代理事务所(普通合伙) 50240 代理人: 路宁
地址: 401331 重*** 国省代码: 重庆;50
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 地图 服务 防爬取 方法
【说明书】:

发明提出了一种地图服务的防爬取方法,包括:S1,用户发送登录认证请求,认证请求中包含登录身份信息,并将登录身份信息发送至地图代理转发器;S2,根据登录身份信息的权限进行地图信息访问请求验证;S3,验证通过后由异常检测算法集成融合进行地图信息访问突变点检测,抓取超过设定频率阈值的访问请求,并采取限速措施;S4,建立以目标地图服务主键的地图服务请求行为图谱,识别具有高度爬取行为特征的请求;S5,如果地图信息访问中没有限速行为,调用SOI扩展组件进行地图信息加密操作;S6,在地图服务器收到地图信息访问请求后,通过SOI组件动态协商的解密密钥进行RSA解密处理,将解密结果返回至用户。

技术领域

本发明涉及地图数据安全领域,尤其涉及一种地图服务的防爬取方法。

背景技术

地图服务是地理信息数据常用的应用与共享方式。目前,在测绘与地理信息行业应用过程中,大多数都采用了将地理空间数据发布为地图服务的方式,目前常见地图服务标准包括符合OGC规范的WMS、WCS、WFS以及地理信息头部企业ESRI的MapServer、FeatureServer等标准。这些地图服务大多数提供了Rest、Soap协议接口,向客户端提供了诸如地图空间查询和属性查询的数据访问能力,同时这些返回结果几乎都是基于明文的,诸如text、html、xml或者json等格式的数据结果。这为地图数据的爬取提供了可能性,客户端只需拼接相应的Rest参数Uri,通过网络爬虫工具就能快速获取地图服务的全部数据源成果,这对地图服务的源数据保护提出了新的挑战。

发明内容

本发明旨在至少解决现有技术中存在的技术问题,特别创新地提出了一种地图服务的防爬取方法。

为了实现本发明的上述目的,本发明提供了一种地图服务的防爬取方法,包括如下步骤:

S1,用户发送登录认证请求,认证请求中包含登录身份信息,并将登录身份信息发送至地图代理转发器;

S2,代理转发器收到登录身份信息后,根据登录身份信息的权限进行地图信息访问请求验证;

S3,验证通过后由异常检测算法集成融合进行地图信息访问突变点检测,抓取超过设定频率阈值的访问请求,并采取限速措施;

S4,对限速措施进行数据统计,建立以目标地图服务主键的地图服务请求行为图谱,识别具有高度爬取行为特征的请求;

S5,如果地图信息访问中没有限速行为,则对该地图信息访问请求发送至地图服务器,调用SOI扩展组件进行地图信息加密操作;

S6,在代理转发器MapProxy收到地图信息访问请求的结果后,通过SOI组件动态协商的解密密钥进行RSA解密处理,将解密结果返回至用户。

优选的,所述S1包括:

S1-1,执行统一登录认证,同时绑定令牌token到具体业务应用身份信息appid上,向代理转发器MapProxy发送地图请求;

S1-2,访问地图图层信息或者地图服务器信息地址,作为登录身份信息请求的来源。

优选的,所述S2包括:

S2-1,代理转发器MapProxy收到登录身份信息请求后,根据appid进行权限验证,

S2-2,通过权限验证后则通过服务身份信息serviceid查询获取地图服务的真实地址。

优选的,所述S3包括:

S3-1,记录用户登录身份信息的请求时间、源ip和待转发的目标地,形成逐分钟网络流量;

S3-2,采用异常检测算法集成融合(Isolation Forest、Mann-Kendall)进行突变点检测;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆师范大学;重庆市规划和自然资源调查监测院,未经重庆师范大学;重庆市规划和自然资源调查监测院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210284863.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top