[发明专利]一种数据采集方法及装置、存储介质有效
申请号: | 201811627906.0 | 申请日: | 2018-12-28 |
公开(公告)号: | CN109684571B | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 陈亚军;李琳;吴耀华;郑斌戈;李小海 | 申请(专利权)人: | 咪咕文化科技有限公司;中国移动通信集团有限公司 |
主分类号: | G06F16/955 | 分类号: | G06F16/955 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 王姗姗;张颖玲 |
地址: | 100032 北京市西城区德*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 采集 方法 装置 存储 介质 | ||
本发明实施例公开了一种数据采集方法及装置、存储介质,该方法包括:获取网页访问地址;在网页圈选设置模式下,根据所述网页访问地址,加载目标网页;所述目标网页预先设置有事件监听功能;在所述目标网页中建立网页圈选功能;当所述网页圈选功能被启动时,利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置网页圈选响应功能;当所述目标网页中的网页元素被圈选时,利用被圈选的网页元素的网页圈选响应功能,获取所述被圈选的网页元素对应的元素信息和页面信息。
技术领域
本发明涉及互联网技术,尤其涉及一种数据采集方法及装置、存储介质。
背景技术
目前,对于网站分析中的数据采集,常用数据采集方法为数据埋点,数据埋点的实现方式包括代码埋点和服务器配置埋点,代码埋点是在网页的业务逻辑代码中需要采集数据的网页元素处,加入埋点代码,服务器配置埋点是为网元加载采集数据的脚本文件,脚本文件可被执行用于为需要采集数据的网页元素添加埋点监听事件,上述实现方式通过埋点代码或埋点监听事件,实现对该网页元素的数据采集,但是,由于上述实现方式中的代码埋点的埋点位置、以及脚本文件中添加埋点监听事件的对象,都是由开发者预先设置的,不能根据用户实际的数据采集需求,灵活调整埋点位置或监听对象。
发明内容
本发明的主要目的在于提出一种数据采集方法及装置、存储介质,能够根据用户实际的数据采集需求,灵活调整数据采集对象,提高了对数据采集对象的更改速度。
本发明的技术方案是这样实现的:
本发明实施例提供了一种数据采集方法,所述方法包括:
获取网页访问地址;
在网页圈选设置模式下,根据所述网页访问地址,加载目标网页;所述目标网页预先设置有事件监听功能;
在所述目标网页中建立网页圈选功能;
当所述网页圈选功能被启动时,利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置网页圈选响应功能;
当所述目标网页中的网页元素被圈选时,利用被圈选的网页元素的网页圈选响应功能,获取所述被圈选的网页元素对应的元素信息和页面信息。
上述方案中,所述获取网页访问地址之前,所述方法还包括:
在网页浏览模式下,对所述目标网页中的网页元素设置事件监听功能和网页点击响应功能,所述网页点击响应功能为对网页浏览模式下被点击的网页元素进行获取元素信息和页面信息的功能。
上述方案中,所述在所述目标网页中建立网页圈选功能,包括:
利用加载状态检测功能,确定所述目标网页是否被完全加载;
当所述目标网页被完全加载时,在所述目标网页中建立网页圈选功能。
上述方案中,所述在所述目标网页中建立网页圈选功能之后,所述利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置网页圈选响应功能之前,所述方法还包括:
当在所述目标网页中建立完成网页圈选功能时,设置所述网页圈选功能对应的圈选开关为可选状态,并显示所述圈选开关;
当所述圈选开关被启动时,确定所述网页圈选功能被启动。
上述方案中,所述网页圈选响应功能包括滑动圈选响应功能和点击圈选响应功能。
上述方案中,在所述利用所述事件监听功能和所述网页圈选功能,对所述目标网页中的网页元素设置网页圈选响应功能之后,所述利用被圈选的网页元素的网页圈选响应功能,获取所述被圈选的网页元素对应的元素信息和页面信息之前,所述方法还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪咕文化科技有限公司;中国移动通信集团有限公司,未经咪咕文化科技有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811627906.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:网页信息处理方法及装置
- 下一篇:一种网络图片获取方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置