[发明专利]网页信息处理方法、系统、电子设备和存储介质有效
申请号: | 201811503668.2 | 申请日: | 2018-12-10 |
公开(公告)号: | CN109597952B | 公开(公告)日: | 2020-12-01 |
发明(设计)人: | 曹功源 | 申请(专利权)人: | 江苏满运软件科技有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955 |
代理公司: | 上海隆天律师事务所 31282 | 代理人: | 臧云霄;钟宗 |
地址: | 210012 江苏省南京市*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请提供一种网页信息处理方法、系统、电子设备和存储介质,涉及数据处理领域,用于爬取和处理网页资源。该网页信息处理方法包括:获取待爬取的URL地址,根据该URL地址爬取网页信息;调取数据库中与该URL地址绑定的解析模块,解析爬取所得的网页信息,提取网页信息的数据内容;并调取数据库中与该URL地址绑定的处理模块,处理解析所得的数据内容。本申请将URL地址与对应的解析模块和处理模块建立相互映射的绑定关系,执行某一URL地址的爬取任务时,在进程中传递该URL地址,以根据该URL地址灵活地从数据库中调取对应的解析模块和处理模块对爬取的网页信息进行处理;URL地址和其对应的解析模块和处理模块可以动态修改配置。 | ||
搜索关键词: | 网页 信息处理 方法 系统 电子设备 存储 介质 | ||
【主权项】:
1.一种网页信息处理方法,其特征在于,包括:获取待爬取的URL地址,根据该URL地址爬取网页信息;调取数据库中与该URL地址绑定的解析模块,解析爬取所得的网页信息,提取网页信息的数据内容;以及调取数据库中与该URL地址绑定的处理模块,处理解析所得的数据内容。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏满运软件科技有限公司,未经江苏满运软件科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811503668.2/,转载请声明来源钻瓜专利网。