[发明专利]一种爬取安卓手机App数据的方法

说明书

本发明公开了一种爬取安卓手机App数据的方法，通过安卓手机中的Android SDK提供的uiautomatorviewer工具获取App的控件参数，然后通过Android测试框架uiautomator绑定App内的界面控件元素，自动爬取App中的数据；最后通过Android客户端和服务器的通信，实现爬取到的数据永久备份；本发明中Android手机自动爬虫技术是基于Android平台界面可见元素，自动爬取App数据，减少不必要的维护成本，具有较好的实用性。

技术领域

本发明属于手机App数据爬取的技术领域，具体涉及一种爬取安卓手机App数据的方法。

背景技术

随着我国经济和技术水平的提高，手机成为了大家生活必不可少的生活工具；市场上开发了大量的手机App，方便了人们的衣食住行。然而手机数据监管成为了国家网络安全的首要问题；手机App数据的后台监控还处于初级水平，目前一般采用爬虫技术收集App的数据并进行后台监管。

然而，在大多数情况下，爬虫技术都是基于网页实现的爬虫方案，Android手机上运行的App都被认为是无法被爬取的，所以并没有一个基于Android移动手机平台的App爬虫方案。

发明内容

本发明的目的在于提供一种爬取安卓手机App数据的方法，通过安卓手机中的Android SDK提供的uiautomatorviewer工具获取App的控件参数，然后通过Android测试框架uiautomator绑定App内的界面控件元素，自动爬取App中的数据；最后存储爬取的数据；本发明中Android手机自动爬虫技术是基于Android平台界面可见元素，自动爬取App数据，减少不必要的维护成本，具有较好的实用性。

本发明主要通过以下技术方案实现：一种爬取安卓手机App数据的方法，通过安卓手机中的Android SDK提供的uiautomatorviewer工具获取App的控件参数，然后通过Android测试框架uiautomator绑定App内的界面控件元素，自动爬取App中的数据；最后通过Android客户端和服务器的通信，实现爬取到的数据永久备份。

本发明中的爬取的算法为现有技术且不是本发明的改进点，故不再赘述。所述爬取数据的储存方式为现有技术，故不再赘述。

本发明基于uiautomator实现的Android平台自动爬虫方案，通过自动重启机制，避免爬虫过程异常退出，达到自动爬虫的方案；本发明通过与服务器https通信，将爬取到的app数据实时传输到服务端，实现永久存储爬虫数据。本发明中Android手机自动爬虫技术是基于Android平台界面可见元素，自动爬取App数据，减少不必要的维护成本。所述自动重启机制为现有技术且不是本发明的改进点，故不再赘述。

为了更好的实现本发明，进一步的，所述爬取安卓手机App数据的方法主要包括以下步骤：

步骤A1：在安卓手机上运行需要爬取的App，并通过安卓手机中Android SDK中提供的uiautomatorviewer工具获取App的控件元素；

步骤A2：绑定需要爬取的控件ID，通过uiautomatorviewer上所展示界面控件结构以及每个控件上的文本信息，并以此记录控件的ID；

步骤A3：根据撰写的爬虫程序获取App中的数据，通过Android客户端和服务器的通信实现爬取到的数据永久备份。

为了更好的实现本发明，进一步的，所述步骤A1中将手机通过USB连接计算机，并通过adb shell命令启动Android SDK目录下面的uiautomatorviewer程序，则可以通过uiautomatorviewer工具观看到App界面的布局和控件结构。