[发明专利]用于识别图像局部区域的方法、装置及终端设备

说明书

本申请涉及用于识别图像局部区域的方法、装置及终端设备,方法包括：获取模板图像中的至少一个区域作为至少一个忽略区域；将所述模板图像与源图像进行匹配计算，在计算时忽略所述至少一个忽略区域，其中所述源图像的长度大于或等于所述模板图像的长度，所述源图像的宽度大于或等于所述模板图像的宽度；根据所述匹配计算得到的结果确定识别结果。本申请的技术方案能够在识别包含有无关背景的截图在屏幕中的对应位置时，能够提高匹配可信度和效率，从而能够提高识别的质量。

技术领域

本申请涉及自动化测试技术领域，具体而言，涉及用于识别图像局部区域的方法、装置及终端设备。

背景技术

相关技术中，自动录制脚本的过程为：用户对设备操作，脚本录制工具自动识别用户的操作，实时生成对应的操作脚本，同时自动截取操作位置的图像保存到脚本中，将截图文件路径作为脚本参数，如图1所示。

回归脚本的原理是，在运行测试脚本时，需要将脚本中的截图与设备当前的画面进行脚本匹配，识别出脚本中的截图在屏幕中的位置，从而定位操作位置，以在该位置处执行脚本定义的操作，从而达到自动化回归测试的目的。

其中，识别截图在屏幕中的对应位置是非常关键的步骤，相关技术通过设定可信度阈值来决定图像识别的结果是否正确，并作为位置依据进行操作。在通常情况下，脚本内产生的截图一般都会有一些多余的无关背景(如游戏控件的周边场景，在不同的场景下或同一场景的不同放大倍率下菜单的背景均不同)，这些无关背景会对识别的可信度计算造成不利影响，例如图2为脚本截图包含无关背景时识别目标图像的可信度为0.825，图3为脚本截图去掉无关背景时识别目标图像的可信度为0.989。

在实际录制测试脚本中，无法确保生产脚本时获取的截图不包含无关背景。因此提高包含有无关背景的截图的图像匹配效果是脚本回归测试面临的一大问题。

发明内容

本申请公开用于识别图像局部区域的方法，在识别包含有无关背景的截图在屏幕中的对应位置时，使得匹配可信度提高。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的一个方面，提供一种用于识别图像局部区域的方法，包括：

获取模板图像中的至少一个区域作为至少一个忽略区域；

将所述模板图像与源图像进行匹配计算，在计算时忽略所述至少一个忽略区域，其中所述源图像的长度大于或等于所述模板图像的长度，所述源图像的宽度大于或等于所述模板图像的宽度；

根据所述匹配计算得到的结果确定识别结果。

根据一些实施例，获取模板图像中的至少一个区域作为至少一个忽略区域包括：响应用户操作获取在所述模板图像上设置的至少一个区域作为所述至少一个忽略区域。

根据一些实施例，获取模板图像中的至少一个区域作为至少一个忽略区域包括：按照设定要求从所述模板图像上自动识别出至少一个区域作为所述至少一个忽略区域。

根据一些实施例，按照设定要求从所述模板图像上自动识别出至少一个区域作为所述至少一个忽略区域包括：从所述模板图像上自动识别出背景区域作为所述至少一个忽略区域。

根据一些实施例，将所述模板图像与源图像进行匹配计算包括：将所述模板图像与所述源图像进行归一化相关系数匹配计算。

根据一些实施例，将所述模板图像与源图像进行匹配计算，在计算时忽略所述至少一个忽略区域包括：

其中T为所述模板图像；

I为所述源图像；

R(x，y)为所述模板图像T的左上角在所述源图像I的(x,y)位置处的可信度矩阵；