[发明专利]一种数据采集方法及装置、存储介质有效
申请号: | 201811627906.0 | 申请日: | 2018-12-28 |
公开(公告)号: | CN109684571B | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 陈亚军;李琳;吴耀华;郑斌戈;李小海 | 申请(专利权)人: | 咪咕文化科技有限公司;中国移动通信集团有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 王姗姗;张颖玲 |
地址: | 100032 北京市西城区德*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 采集 方法 装置 存储 介质 | ||
1.一种数据采集方法,其特征在于,所述方法包括:
获取网页访问地址;
在网页圈选设置模式下,根据所述网页访问地址,加载目标网页;所述目标网页预先设置有事件监听功能;
在所述目标网页中建立网页圈选功能;
当所述网页圈选功能被启动时,利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置滑动圈选响应功能和点击圈选响应功能;
利用所述滑动圈选响应功能,当检测到所述目标网页中的网页元素被滑动圈选时,根据被滑动圈选的网页元素的结构层级和元素属性,确定被滑动圈选的网页元素是否属于可圈选元素;
当所述被滑动圈选的网页元素属于可圈选元素时,利用所述点击圈选响应功能,检测所述被滑动圈选的网页元素是否被点击圈选;
当所述被滑动圈选的网页元素被点击圈选时,将所述目标网页中的与被点击圈选的网页元素属于同一元素类型的网页元素,或所述被点击圈选的网页元素,确定为被圈选的网页元素,利用所述被圈选的网页元素的网页圈选响应功能,获取所述被圈选的网页元素对应的元素信息和页面信息。
2.根据权利要求1所述的方法,其特征在于,所述获取网页访问地址之前,所述方法还包括:
在网页浏览模式下,对所述目标网页中的网页元素设置事件监听功能和网页点击响应功能,所述网页点击响应功能为对网页浏览模式下被点击的网页元素进行获取元素信息和页面信息的功能。
3.根据权利要求1所述的方法,其特征在于,所述在所述目标网页中建立网页圈选功能,包括:
利用加载状态检测功能,确定所述目标网页是否被完全加载;
当所述目标网页被完全加载时,在所述目标网页中建立网页圈选功能。
4.根据权利要求1所述的方法,其特征在于,所述在所述目标网页中建立网页圈选功能之后,所述利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置网页圈选响应功能之前,所述方法还包括:
当在所述目标网页中建立完成网页圈选功能时,设置所述网页圈选功能对应的圈选开关为可选状态,并显示所述圈选开关;
当所述圈选开关被启动时,确定所述网页圈选功能被启动。
5.根据权利要求1所述的方法,其特征在于,在所述获取所述被圈选的网页元素对应的元素信息和页面信息之后,所述方法还包括:
对所述目标网页中的网页元素移除所述网页圈选响应功能,以使得所述目标网页恢复网页浏览模式。
6.一种数据采集装置,其特征在于,所述装置包括:网页加载单元、网页圈选单元、网页圈选响应单元和获取单元;其中,
所述网页加载单元,用于获取网页访问地址;及在网页圈选设置模式下,根据所述网页访问地址,加载目标网页;所述目标网页预先设置有事件监听功能;
所述网页圈选单元,用于在所述目标网页中建立网页圈选功能;
所述网页圈选响应单元,用于当所述网页圈选功能被启动时,利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置滑动圈选响应功能和点击圈选响应功能;
所述获取单元,用于利用所述滑动圈选响应功能,当检测到所述目标网页中的网页元素被滑动圈选时,根据被滑动圈选的网页元素的结构层级和元素属性,确定被滑动圈选的网页元素是否属于可圈选元素;当所述被滑动圈选的网页元素属于可圈选元素时,利用所述点击圈选响应功能,检测所述被滑动圈选的网页元素是否被点击圈选;当所述被滑动圈选的网页元素被点击圈选时,将所述目标网页中的与被点击圈选的网页元素属于同一元素类型的网页元素,或所述被点击圈选的网页元素,确定为被圈选的网页元素,利用所述被圈选的网页元素的网页圈选响应功能,获取所述被圈选的网页元素对应的元素信息和页面信息。
7.一种数据采集设备,其特征在于,所述设备包括:处理器、存储器和通信总线,所述存储器通过所述通信总线与所述处理器进行通信,所述存储器存储所述处理器可执行的一个或者多个程序,当所述一个或者多个程序被执行时,通过所述处理器执行如权利要求1-5任一项所述方法的步骤。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有程序,当所述程序被至少一个处理器执行时,导致所述至少一个处理器执行权利要求1-5任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪咕文化科技有限公司;中国移动通信集团有限公司,未经咪咕文化科技有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811627906.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:网页信息处理方法及装置
- 下一篇:一种网络图片获取方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置