[发明专利]网页获取方法、装置、计算机设备及存储介质有效
申请号: | 201910323566.0 | 申请日: | 2019-04-22 |
公开(公告)号: | CN110221871B | 公开(公告)日: | 2021-10-22 |
发明(设计)人: | 范小明 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F16/955 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 黄晶晶 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网页 获取 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种网页获取方法、装置、计算机设备及存储介质,该方法包括:在容器中运行页面获取应用;所述页面获取应用,是安装于所述容器的用于获取页面内容的应用程序;通过所述页面获取应用获取目标网页的链接地址;由所述页面获取应用,调用安装于所述容器中的浏览器;通过所述浏览器,渲染与所述链接地址对应的所述目标网页的页面内容。本申请的方案,能够提高网页内容获取的准确性。
技术领域
本发明涉及计算机技术领域,特别是涉及一种网页获取方法、装置、计算机设备及存储介质。
背景技术
随着互联网技术的飞速发展,越来越多的场景需要获取网页内容。比如,网页爬虫就需要爬取网页内容。网页内容的完整性,直接影响到相关结果的准确性,因此,获取完整的网页内容至关重要。
传统方法在获取网页内容时,是使用HTTP协议请求网页内容,这种方式所请求到的网页内容,并未经过浏览器的解析计算,可能只包含部分数据。所以,导致获取的网页内容缺失比较多,造成所获取的网页内容不够准确。
发明内容
基于此,有必要针对传统网页获取方法存在的准确性比较低的问题,提供一种网页获取方法、装置、计算机设备及存储介质。
一种网页获取方法,所述方法包括:
在容器中运行页面获取应用;所述页面获取应用,是安装于所述容器的用于获取页面内容的应用程序;
通过所述页面获取应用获取目标网页的链接地址;
由所述页面获取应用,调用安装于所述容器中的浏览器;
通过所述浏览器,渲染与所述链接地址对应的所述目标网页的页面内容。
一种网页获取装置,所述装置包括:
获取模块,用于在容器中运行页面获取应用;所述页面获取应用,是安装于所述容器的用于获取页面内容的应用程序;通过所述页面获取应用获取目标网页的链接地址;
调用模块,用于由所述页面获取应用,调用安装于所述容器中的浏览器;
渲染模块,用于通过所述浏览器,渲染与所述链接地址对应的所述目标网页的页面内容。
一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
在容器中运行页面获取应用;所述页面获取应用,是安装于所述容器的用于获取页面内容的应用程序;
通过所述页面获取应用获取目标网页的链接地址;
由所述页面获取应用,调用安装于所述容器中的浏览器;
通过所述浏览器,渲染与所述链接地址对应的所述目标网页的页面内容。
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如下步骤:
在容器中运行页面获取应用;所述页面获取应用,是安装于所述容器的用于获取页面内容的应用程序;
通过所述页面获取应用获取目标网页的链接地址;
由所述页面获取应用,调用安装于所述容器中的浏览器;
通过所述浏览器,渲染与所述链接地址对应的所述目标网页的页面内容。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910323566.0/2.html,转载请声明来源钻瓜专利网。