[发明专利]一种H5页面随机密码键盘的自动化测试方法

权利要求书

1.一种H5页面随机密码键盘的自动化测试方法，包括以下步骤：

步骤1：对随机密码键盘的H5页面进行截图，得到图像imageA；

步骤2：对图像imageA进行重置图片的大小、二值化、膨化操作，得到处理后的图像imageB；

步骤3：对图像imageB进行OCR识别，得到识别后的反映字符位置数据的字典dictC和字典dictD；

步骤4：对字典dictC进行计算，得到符合长度和符合键盘位置的数据字典dictE；

步骤5：对字典dictE和字典dictD进行判断检查并计算，得到键盘中26个字母的坐标；

步骤6：根据字母的坐标进行对应的键盘位置点击。

2.根据权利要求1所述的一种H5页面随机密码键盘的自动化测试方法，其特征在于：所述步骤2包括以下步骤：

步骤2.1：对图像imageA进行重置图片的大小，得到标准化尺寸的图像imageA-1；

步骤2.2：对图像imageA-1进行图像二值化计算，得到二值化黑白图像imageA-2，突出目标字符，去除无关元素；

步骤2.3：对图像imageA-2进行膨胀处理，得到图像imageB。

3.根据权利要求1所述的一种H5页面随机密码键盘的自动化测试方法，其特征在于：所述步骤3包括以下步骤：

步骤3.1：调用pytesseract.image_to_data()函数对图像imageB进行OCR识别，得到每一行字符位置数据字典dictC；

步骤3.2：调用pytesseract.image_to_boxes()函数对图像imageB进行OCR识别，得到每一个字符位置数据字典dictD。

4.根据权利要求1所述的一种H5页面随机密码键盘的自动化测试方法，其特征在于：所述步骤4包括以下步骤：

步骤4.1：结合字典dictC和键盘的特点，conf＝-1，表示项无文字，则在两个conf＝-1之间的字符，视为同一行字符，将属于同一行的字符合并作为“键”，当前行字符的位置作为“值”，得到字典dictC-1；

步骤4.2：根据随机密码键盘的第一、二、三行字符个数在H5页面的中下页的位置筛选字典dictC-1中的“键”包含小写字母长度大于等于n，且对应“值”在中下页的数据，记录为字典dictE。

5.根据权利要求1所述的一种H5页面随机密码键盘的自动化测试方法，其特征在于：所述步骤5包括以下步骤：

步骤5.1：根据键盘有有m行字符的特点，判断字典dictE长度是否等于m，不符合则识别不准确，重复步骤3～步骤4；

步骤5.2：若步骤5.1条件符合，判断字典dictE包含[a-z]所有26个字母，不符合则识别有误差，对原始图像imageA截取其中的键盘区域，重复步骤2～步骤4，若符合识别，则进行步骤5.3；

步骤5.3：判断字典dictE中每个字母只出现1次，对照字典dictD记录键盘中26个字母的坐标，否则说明字母识别有重复的，对重复的字母进行计算，选择正确的坐标位置后，记录键盘中26个字母的坐标。

6.一种H5页面随机密码键盘的自动化测试装置，包括：

截图模块：对随机密码键盘的H5页面进行截图，得到图像imageA；

图像处理模块：对图像imageA进行重置图片的大小、二值化、膨化操作，得到处理后的图像imageB；

OCR识别模块：对图像imageB进行OCR识别，得到识别后的反映字符位置数据的字典dictC和字典dictD；

处理模块：对字典dictC进行计算，得到符合长度和符合键盘位置的数据字典dictE；

坐标模块：对字典dictE和字典dictD进行判断检查并计算，得到键盘中26个字母的坐标；

点击模块：根据字母的坐标进行对应的键盘位置点击。