[发明专利]数据获取方法、装置、终端设备及可读存储介质在审

专利信息
申请号: 202110891566.8 申请日: 2021-08-04
公开(公告)号: CN113609366A 公开(公告)日: 2021-11-05
发明(设计)人: 刘新;秦文礼 申请(专利权)人: 深圳市元征科技股份有限公司
主分类号: G06F16/951 分类号: G06F16/951;G06F21/60
代理公司: 深圳中一联合知识产权代理有限公司 44414 代理人: 甘莹
地址: 518000 广东省深圳市龙*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 获取 方法 装置 终端设备 可读 存储 介质
【说明书】:

本申请适用于计算机技术领域,提供了一种数据获取方法、装置、终端设备及可读存储介质,该方法包括:当接收到用户发送的数据获取请求时,生成接口集合对应的目标参数密文,接口集合包括至少两个数据接口,数据接口包括数据获取请求对应的第一目标接口;将目标参数密文发送至服务器进行校验;当目标参数密文校验通过时,接收服务器返回的目标数据。本申请可以一定程度上解决目前的反爬虫技术容易被破解的问题。

技术领域

本申请属于计算机技术领域,尤其涉及一种数据获取方法、装置、终端设备及可读存储介质。

背景技术

随着互联网的快速发展,网上存在海量的数据。为了抓取各个网站上有价值的数据,出现了爬虫技术。然而,同时,也衍生了各种各样的恶意爬虫技术。

恶意爬虫技术不仅会占用大量的网站流量,影响真正有需求的用户的访问,并且会导致网站关键信息被不正当使用。因此,反爬虫技术对于网站来说必不可少。

目前,虽然存在各种各样的反爬虫技术,比如通过User-Agent技术以及IP限制技术来实现反爬虫。但是,目前这些反爬虫技术均容易被破解。

发明内容

本申请实施例提供了一种数据获取方法、装置、终端设备及可读存储介质,可以一定程度上解决目前的反爬虫技术容易被破解的问题。

第一方面,本申请实施例提供了一种数据获取方法,应用于客户端,包括:

当接收到用户发送的数据获取请求时,生成接口集合对应的目标参数密文,上述接口集合包括至少两个数据接口,上述数据接口包括上述数据获取请求对应的第一目标接口;

将上述目标参数密文发送至服务器进行校验;

当上述目标参数密文校验通过时,接收上述服务器返回的目标数据。

可选地,上述生成接口集合对应的目标参数密文,包括:

获取上述接口集合中的各个数据接口对应的初始参数密文;

按照预设规则对上述初始参数密文进行排列,得到上述目标参数密文。

可选地,在上述获取上述接口集合中的各个数据接口对应的初始参数密文之前,还包括:

若上述接口集合中存在未设置初始参数密文的第二目标接口,则生成预设数量的随机字符,并将上述预设数量的随机字符作为上述第二目标接口的初始参数密文。

可选地,在上述获取所述接口集合中的各个数据接口对应的初始参数密文,包括:

获取上述接口集合中的各个数据接口对应的参数明文;

采用各个上述数据接口对应的加密算法对上述数据接口的参数明文进行加密,得到初始参数密文,各个上述数据接口对应的加密算法不相同。

可选地,该方法还包括:

周期性地改变各个上数据接口对应的加密算法的密钥。

可选地,上述按照预设规则对上述初始参数密文进行排列,得到上述目标参数密文,包括:

按照预设规则对上述初始参数密文进行排列,得到随机密文;

将校验字符添加至上述随机密文上,得到目标参数密文,上述校验字符用于校验上述目标参数密文的有效性。

可选地,周期性地改变上述校验字符的内容和/或上述校验字符在上述随机密文上的位置。

第二方面,本申请实施例提供了另一种数据获取方法,应用于服务器,包括:

当接收到接口集合对应的目标参数密文时,对上述目标参数密文进行校验,上述接口集合包括至少两个数据接口,上述数据接口包括数据获取请求对应的第一目标接口;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市元征科技股份有限公司,未经深圳市元征科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110891566.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top