[发明专利]应用程序用户界面的获取方法和装置

权利要求书

1.一种应用程序用户界面的获取方法，其特征在于，包括：

确定步骤：确定所述应用程序的当前界面，其中，所述当前界面的起始界面为所述应用程序的主界面；

提取步骤：根据所述当前界面的灰度图提取目标区域；

遍历步骤：遍历地将触发指令下发至所述当前界面上的每个目标区域，直至所述当前界面上的所述目标区域均完成所述触发指令指示的操作，其中，所述目标区域为接收触发指令以对所述当前界面进行操作的区域；

获取步骤：每下发所述触发指令至一个所述目标区域后，获取一次所述触发指令对所述当前界面进行操作后的子界面；

对比步骤：对比所述子界面与所述子界面的父界面，以确定所述子界面的类型；

第一返回步骤：在确定出所述子界面的类型为第一类型的情况下，返回所述遍历步骤，其中，所述第一类型表示所述子界面为界面集中的任一界面，所述界面集为在获取所述子界面之前获取到的界面的集合；以及

第二返回步骤：在确定出所述子界面的类型为第二类型的情况下，确定所述子界面为所述当前界面，并返回所述遍历步骤，其中，所述第二类型表示所述子界面与所述界面集中的任一界面均不相同；

其中，所述提取步骤包括：对所述当前界面进行灰度化处理，得到所述当前界面的灰度图；对所述当前界面的灰度图进行边缘检测，得到边缘图；以及检测所述边缘图的四连通区域，并确定检测出的所述四连通区域为所述目标区域。

2.根据权利要求1所述的获取方法，其特征在于，所述对比步骤包括：

计算所述子界面与所述父界面的相似度；

比较计算出的相似度与第一预设相似度和第二预设相似度的大小，其中，所述第一预设相似度小于所述第二预设相似度；

在比较出计算出的相似度小于所述第一预设相似度的情况下，确定所述子界面的类型为所述第一类型；以及

在比较出计算出的相似度大于所述第二预设相似度的情况下，确定所述子界面的类型为所述第二类型。

3.根据权利要求2所述的获取方法，其特征在于，计算所述子界面与所述父界面的相似度包括：

对所述子界面和所述父界面进行灰度化处理，得到第一灰度图和第二灰度图，其中，所述第一灰度图为所述子界面的灰度图，所述第二灰度图为所述父界面的灰度图；

计算组成所述第一灰度图的像素的灰度平均值，得到第一平均值，并计算组成所述第二灰度图的像素的灰度平均值，得到第二平均值；

比较组成所述第一灰度图的每个像素的灰度值与所述第一平均值的大小，比较组成所述第二灰度图的每个像素的灰度值与所述第二平均值的大小；

标记所述第一灰度图中的第一像素和所述第二灰度图中的第一像素的灰度值均为字符1，并标记所述第一灰度图中的第二像素和所述第二灰度图中的第二像素的灰度值均为字符0，其中，所述第一灰度图中的第一像素的灰度值大于或等于所述第一平均值，所述第一灰度图中的第二像素的灰度值小于所述第一平均值，所述第二灰度图中的第一像素的灰度值大于或等于所述第二平均值，所述第二灰度图中的第二像素的灰度值小于所述第二平均值；

确定第一字符串为所述子界面的指纹，并确定第二字符串为所述父界面的指纹，其中，所述第一字符串为以字符1和/或字符0表示的所述第一灰度图上的像素按照预设顺序组成的字符串，所述第二字符串为以字符1和/或字符0表示的所述第二灰度图上的像素按照所述预设顺序组成的字符串；

比较所述第一字符串上的第i位字符与所述第二字符串上的所述第i位字符是否相同，其中，i依次取1至n，n为所述第一字符串或所述第二字符串的字符位数；

统计所述第一字符串和所述第二字符串对应位字符不相同的个数；以及

确定统计出的个数为所述子界面与所述父界面的相似度。

4.根据权利要求1所述的获取方法，其特征在于，在所述遍历步骤之前，所述获取方法还包括：

设置目标区域黑名单，其中，所述目标区域黑名单包括至少一个所述目标区域，

其中，在遍历所述触发指令至所述当前界面上的目标区域过程中，跳过所述目标区域黑名单中的所述目标区域。