[发明专利]一种基于数字图像识别算法的XWindow代填方法

说明书

技术领域

本发明属于计算机及网络运维管理技术领域，具体的说是一种基于数字图像识别算法的XWindow代填方法。

背景技术

据申请人了解：随着计算机及网络技术的发展，越来越多的领域应用了计算机及网络，甚至许多领域基本上完全依赖计算机及网络，尤其是计算机及网络非常密集的领域，例如电信机房、数据中心、银行等，对计算机及网络的运行维护，有着非常高的要求，尤其是日益增长的服务器/设备，每个服务器/设备对应多个账号，这些以几何级数增长的账号，出现明显的管理上的瓶颈。

经申请人研究调查：目前常用的针对大量账号的管理方法主要是通过预先配置账号密码，用户只需使用运维系统的账号密码登陆运维系统，选择需要运维的服务器或设备，运维系统将进行自动代填。而大量的常见的服务器/设备都是非Windows系统，也就是说是类Uninx系统。而XWindow对各种Uninx系统的图形界面有着很好的支持。

通过研究总结发现：XWindow是类似RDp/VNC的一种基于远程图像传输的系统，因此针对XWindow的代填不能像传统代填那样，使用枚举Windows控件，根据控件类别，名称等特征的方法进行用户名/密码输入框的定位/代填。

发明内容

本发明所要解决的技术问题是，克服现有技术的缺点，提出一种基于数字图像识别算法的XWindow代填方法，通过计算机屏幕图像，运用图像识别相关算法识别并定位到XWindows登录界面的用户名，口令输入框，然后模拟用户鼠标点击操作，依次激活用户名，口令输入框，填入预设的账户和密码，从而实现代填，本发明对目前XWindow登录界面的多样性有较好的兼容性。

本发明解决以上技术问题的技术方案是：

一种基于数字图像识别算法的XWindow代填方法，按以下步骤进行：

⑴代填第一阶段，通过WindowsAPI进行屏幕截图，获取图像；

⑵通过图像识别算法，在图像中寻找XWindows的登录用户名输入框；

⑶如果寻找不成功，则重复步骤⑴；

⑷根据寻找到的输入框的坐标计算输入框中心，同时将鼠标移动到输入框坐标，模拟用户点击，激活输入框；

⑸可再次检测屏幕图像，确认寻找到的输入框正确有效；

⑹模拟键盘输入帐户，并回车；

⑺代填第二阶段，通过WindowsAPI进行屏幕截图，获取图像；

⑻过图像识别算法，在图像中寻找XWindows的登录密码输入框；

⑼如果寻找不成功，则重复步骤（7）；

⑽根据寻找到的输入框的坐标计算输入框中心，同时将鼠标移动到输入框坐标，模拟用户点击，激活输入框；

⑾可再次检测屏幕图像，确认寻找到的输入框正确有效。（此步骤可省略）；

⑿模拟键盘输入密码，并回车；

⒀代填完成。

本发明进一步限定的技术方案是:

前述的基于数字图像识别算法的XWindow代填方法，步骤⑴中，截取的屏幕图像为32位位图格式，为了提高效率，图像不以磁盘文件保存，直接存储在计算机内存中。

前述的基于数字图像识别算法的XWindow代填方法，步骤⑵中，图像识别算法是通过扫描图像，将符合编辑框的矩形寻找出来，并根据宽度和高度范围，进行筛选，最后获得最可能的结果，结果以数组的形式返回，同时返回数组元素的个数；所述矩形的定义为Rect（Left，Top，Right，Bottom）。

前述的基于数字图像识别算法的XWindow代填方法，步骤⑷中的输入框中心点坐标Point（X，Y）的计算方法为：

X =（Left+Right）/2

Y =（Top+Bottom）/2。

步骤⑸中，再次检测屏幕图像，是因为部分输入框内部含有文字提示信息，激活该输入框后，内部文字信息将会清空，所以为了提高准确率，可以再次检测，如果坐标吻合，则认为成功。如果不吻合，则可能是不支持的特例，需要修改完善算法。

步骤(6)中，几乎所有的XWindows系统登录界面输入用户名后，按回车，紧接着都是密码输入界面，因此本发明利用这个规律，降低了复杂性，提高了方法的通用性。

本发明的有益效果是：

本发明实现了通过计算机屏幕图像，运用相关算法识别并定位到XWindows登录界面的用户名，口令输入框，然后模拟用户鼠标点击操作，依次激活用户名，口令输入框，填入预设的账户和密码，从而实现代填。

附图说明

图1是输入框代填实现的整体步骤。