[发明专利]基于图像对比实现的数字键盘定位方法

说明书

本发明提供基于图像对比实现的数字键盘定位方法，包括如下步骤：启动密码键盘并获取密码键盘的截图；获取登陆密码中各个字符在密码键盘上的坐标位置；按照登陆密码中字符排列的先后顺序依次点击对应的坐标位置。本发明通过图像对比技术，识别数字键盘每个数字的具体坐标，进而解决随机数字键盘的随机坐标识别问题，然后通过系统级鼠键控制点击数字键盘完成输入，整个过程不依赖不侵入数字键盘程序、开发效率高、具备通用性。

技术领域

本发明涉及图像处理技术领域，具体涉及基于图像对比实现的数字键盘定位方法。

背景技术

现有自动化系统对于网页登录时的数字键盘输入并没有很好的解决方法，特别是随机出现的数字键盘，每次数字出现的位置都随机变化，无法按照固定坐标进行点击，而通过系统底层的解决方案又耗时耗力，开发周期长，成本高，不具有通用性，专利文件CN201910131075.6公开了数字键盘识别模型的训练方法、数字键盘识别方法及系统，该专利的技术方案能够对数字键盘进行识别，但是，并不能解决在随机变动的数字键盘上自动输入登陆密码的问题。

因而，需要提供一种方案解决上述问题。

发明内容

针对现有技术存在的问题，本发明提供基于图像对比实现的数字键盘定位方法。

为实现上述目的，本发明的具体方案如下：

本发明提供基于图像对比实现的数字键盘定位方法，包括如下步骤：

S1，启动密码键盘并获取密码键盘的截图；

S2，获取登陆密码中各个字符在密码键盘上的坐标位置；

S3，按照登陆密码中字符排列的先后顺序依次点击对应的坐标位置。

优选地，步骤S1具体包括：

S11，打开指定网页并全屏显示，点击密码输入框，弹出密码键盘；

S12，将密码键盘截屏，并保存为截图。

优选地，步骤S11中，打开指定网页并全屏显示，点击密码输入框，弹出密码键盘，通过Helium程序自动化实现。

优选地，步骤S12中，所述截屏通过调用PrtSc按键功能实现。

优选地，步骤S2具体包括：

S21，加载登陆密码，按照登陆密码中字符排列的先后顺序获取坐标位置；

S22，将登陆密码中左侧第一位字符与截图中的字符图像进行比对，确认第一位字符在截图中的位置并记录第一位字符在截图中距离密码键盘左侧和上侧的距离，将距离密码键盘左侧和上侧的距离记录为第一位字符的坐标数据；

S23，重复步骤S22获取密码中第二位字符至最后一位字符的坐标数据，根据坐标数据确定坐标位置。

优选地，在步骤S3中，在密码键盘上进行点击操作时，相邻的两次点击操作之间设置一定的时间间隔。

优选地，步骤S22中，将登陆密码中左侧第一位字符与截图中的字符图像进行比对，通过OCR技术实现；

确认第一位字符在截图中的位置并记录第一位字符在截图中距离密码键盘左侧和上侧的距离，通过ImageJ程序的测距功能实现。

优选地，所述密码键盘包括：固定密码键盘、随机密码键盘。

采用本发明的技术方案，具有以下有益效果：

通过图像对比技术，识别数字键盘每个数字的具体坐标，进而解决随机数字键盘的随机坐标识别问题，然后通过系统级鼠键控制点击数字键盘完成输入，整个过程不依赖不侵入数字键盘程序、开发效率高、具备通用性。

附图说明