[发明专利]数据获取方法、装置、终端设备及可读存储介质在审
申请号: | 202110891566.8 | 申请日: | 2021-08-04 |
公开(公告)号: | CN113609366A | 公开(公告)日: | 2021-11-05 |
发明(设计)人: | 刘新;秦文礼 | 申请(专利权)人: | 深圳市元征科技股份有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F21/60 |
代理公司: | 深圳中一联合知识产权代理有限公司 44414 | 代理人: | 甘莹 |
地址: | 518000 广东省深圳市龙*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 获取 方法 装置 终端设备 可读 存储 介质 | ||
本申请适用于计算机技术领域,提供了一种数据获取方法、装置、终端设备及可读存储介质,该方法包括:当接收到用户发送的数据获取请求时,生成接口集合对应的目标参数密文,接口集合包括至少两个数据接口,数据接口包括数据获取请求对应的第一目标接口;将目标参数密文发送至服务器进行校验;当目标参数密文校验通过时,接收服务器返回的目标数据。本申请可以一定程度上解决目前的反爬虫技术容易被破解的问题。
技术领域
本申请属于计算机技术领域,尤其涉及一种数据获取方法、装置、终端设备及可读存储介质。
背景技术
随着互联网的快速发展,网上存在海量的数据。为了抓取各个网站上有价值的数据,出现了爬虫技术。然而,同时,也衍生了各种各样的恶意爬虫技术。
恶意爬虫技术不仅会占用大量的网站流量,影响真正有需求的用户的访问,并且会导致网站关键信息被不正当使用。因此,反爬虫技术对于网站来说必不可少。
目前,虽然存在各种各样的反爬虫技术,比如通过User-Agent技术以及IP限制技术来实现反爬虫。但是,目前这些反爬虫技术均容易被破解。
发明内容
本申请实施例提供了一种数据获取方法、装置、终端设备及可读存储介质,可以一定程度上解决目前的反爬虫技术容易被破解的问题。
第一方面,本申请实施例提供了一种数据获取方法,应用于客户端,包括:
当接收到用户发送的数据获取请求时,生成接口集合对应的目标参数密文,上述接口集合包括至少两个数据接口,上述数据接口包括上述数据获取请求对应的第一目标接口;
将上述目标参数密文发送至服务器进行校验;
当上述目标参数密文校验通过时,接收上述服务器返回的目标数据。
可选地,上述生成接口集合对应的目标参数密文,包括:
获取上述接口集合中的各个数据接口对应的初始参数密文;
按照预设规则对上述初始参数密文进行排列,得到上述目标参数密文。
可选地,在上述获取上述接口集合中的各个数据接口对应的初始参数密文之前,还包括:
若上述接口集合中存在未设置初始参数密文的第二目标接口,则生成预设数量的随机字符,并将上述预设数量的随机字符作为上述第二目标接口的初始参数密文。
可选地,在上述获取所述接口集合中的各个数据接口对应的初始参数密文,包括:
获取上述接口集合中的各个数据接口对应的参数明文;
采用各个上述数据接口对应的加密算法对上述数据接口的参数明文进行加密,得到初始参数密文,各个上述数据接口对应的加密算法不相同。
可选地,该方法还包括:
周期性地改变各个上数据接口对应的加密算法的密钥。
可选地,上述按照预设规则对上述初始参数密文进行排列,得到上述目标参数密文,包括:
按照预设规则对上述初始参数密文进行排列,得到随机密文;
将校验字符添加至上述随机密文上,得到目标参数密文,上述校验字符用于校验上述目标参数密文的有效性。
可选地,周期性地改变上述校验字符的内容和/或上述校验字符在上述随机密文上的位置。
第二方面,本申请实施例提供了另一种数据获取方法,应用于服务器,包括:
当接收到接口集合对应的目标参数密文时,对上述目标参数密文进行校验,上述接口集合包括至少两个数据接口,上述数据接口包括数据获取请求对应的第一目标接口;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市元征科技股份有限公司,未经深圳市元征科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110891566.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置