[发明专利]一种基于图像分析的页面控件异步遍历方法

摘要

本发明公开了一种基于图像分析的页面控件异步遍历方法，首先进入页面，移动到第一个控件，每次移动到下一个控件，获取页面的截图，然后生成两个异步任务，其一是通过计算机视觉算法获取控件的坐标，其二是通过OCR算法识别字幕获取控件的替代文本内容，将这两个任务提交给线程池执行后，继续移动到下一个控件；每次移动特定次数后，都判断页面控件是否遍历完毕，如果仍未完毕就继续遍历，否则结束遍历。本发明提供了一种异步的、快速的页面控件遍历方法，可作为移动应用测试和数据分析挖掘的上游服务，爬取移动应用的页面控件信息，供后续任务使用。