[发明专利]场景识别方法、装置和计算机可读存储介质

权利要求书

1.一种场景识别方法，包括：

获取界面图像，并提取所述界面图像中的界面对象；

根据所述界面对象，确定所述界面图像的场景类型；

基于所述场景类型，确定所述界面图像中的场景对象，所述场景对象包括所述界面对象中属于场景对象的界面对象；

确定并标记所述场景对象中的标识对象，并遍历操作所述场景对象，获得操作结果，并根据所述操作结果确定并标记所述场景对象中的操作对象。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

确定所述标识对象的面积；

根据所述标识对象的面积对所述标识对象进行排序后，将所述界面图像以及对应的标识对象和操作对象保存至自动标记场景图像中。

3.根据权利要求1所述的方法，其特征在于，在获取界面图像之后，提取所述界面图像中的界面对象之前，还包括步骤：识别所述试界面图像是否属于已有场景图像；

当识别确定所述界面图像不属于已有场景图像时，进入所述提取所述界面图像的界面对象的步骤。

4.根据权利要求3所述的方法，其特征在于，所述识别界面图像是否属于已有场景图像，包括：

将所述界面图像与所述已有场景图像进行模板匹配，得到匹配值；

当所述界面图像与所述已有场景图像的匹配值不满足预设匹配值时，获取所述已有场景图像的标识对象；

在所述界面图像不包括标识对象时，将所述已有场景图像的标识对象与所述界面图像进行图像匹配；

当所述已有场景图像的标识对象中存在至少一个标识对象与所述界面图像不匹配时，确定所述界面图像不属于已有场景图像。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

在所述界面包括标识对象时，将所述已有场景图像的标识对象与所述界面图像的标识对象进行图像匹配；

当所述已有场景图像的标识对象中存在至少一个标识对象与所述界面图像的标识对象均不匹配时，确定所述界面图像不属于已有场景图像。

6.根据权利要求3所述的方法，其特征在于，所述方法还包括：

在识别确定所述界面图像属于已有场景图像时，获取所述已有场景图像的标记对象和操作对象；

将所述已有场景图像的标记对象和操作对象作为所述界面图像的标识对象和操作对象；所述已有场景图像包括脚本场景图像和自动标记场景图像。

7.根据权利要求1所述的方法，其特征在于，提取所述界面图像中的界面对象，包括：

将所述界面图像进行颜色空间的转换，得到转换后的界面图像；

从所述转换后的界面图像中提取亮度通道图像；

利用亮度阈值将所述亮度通道图像进行图像二值化，得到所述界面图像对应的二值化图像；

对所述二值化图像进行形态学处理，提取形态学处理后的二值化图像内的轮廓；

计算所述轮廓的外接矩形，并过滤所述轮廓的外接矩形，得到所述界面图像的界面对象。

8.根据权利要求1所述的方法，其特征在于，所述根据所述界面对象，确定所述界面图像的场景类型，包括：

根据所述界面对象的位置和面积确定所述界面图像是否存在弹窗；

当所述界面图像中存在弹窗时，确定所述界面图像的场景类型为弹窗类场景，所述场景类型包括弹窗类场景；

当所述界面图像中不存在弹窗时，确定所述界面图像的场景类型为非弹窗类场景，所述场景类型包括非弹窗类场景。

9.根据权利要求8所述的方法，其特征在于，所述根据所述界面对象的位置和面积确定所述界面图像是否存在弹窗，包括：

当任一个所述界面对象的位置和面积均满足预设要求时，确定所述界面图像存在弹窗；

当任一个所述界面对象的位置和面积至少一项不满足预设要求时，确定所述界面图像不存在弹窗。