[发明专利]自动确定GUI中待交互的交互式GUI元素的方法和设备

说明书

一种自动确定图形用户界面(GUI)中的待交互的交互式GUI元素的计算机实现的方法、设备和非暂时性计算机可读存储介质。该方法包括：处理器基于多个算法在GUI中检测一个或多个候选交互式GUI元素；处理器为一个或多个候选交互式GUI元素中的每个确定似然性指示符，似然性指示符指示与该似然性指示符相关联的候选交互式GUI元素是待交互的交互式GUI元素的似然性；以及处理器基于似然性指示符从一个或多个候选交互式GUI元素中确定待交互的交互式GUI元素。

交叉引用

在本公开的描述中引用和讨论了可能包括专利、专利申请和各种出版物在内的一些参考文献。提供对这样的参考文献的引用和/或讨论仅是为了阐明本公开的描述，而不是承认任何这样的参考文献是本文描述的公开的“现有技术”。在本说明书中引用和讨论的所有参考文献均通过引用以其整体并入本文，其程度与每个参考文献通过引用单独并入相同。

技术领域

本公开涉及自动化控制领域，尤其涉及一种自动确定用户交互恶意软件的计算机实现的方法、设备及非暂时性计算机可读存储介质。

背景技术

随着计算机和移动电话等电子设备的日益普及，它们已成为我们日常生活中不可或缺的部分。但是，恶意软件已成为对此类电子设备的威胁。

恶意软件(恶意的软件的俗称)是故意设计成对计算机、服务器、客户端或计算机网络造成损害的任何软件。恶意软件以某种方式植入或引入目标计算机或移动电话后会造成损害，并且可以采取可执行代码、脚本、活动内容和其他软件的形式。该代码被描述为计算机病毒、蠕虫、特洛伊木马、勒索软件、间谍软件、广告软件或恐吓软件等。恶意软件具有恶意意图，违背计算机用户的利益而动作，因此不包括由于某些缺陷(其通常被描述为软件错误)而导致意外损坏的软件。

对恶意软件行为的研究可用于开发反恶意软件解决方案，以防止恶意软件发作。沙箱技术通常用于在严格控制的环境中执行不受信任的程序，而不会损害主机设备[2]。对于大规模的恶意软件行为研究，开发了无需用户交互的自动化技术，以提高沙箱的工作效率[3]。但是，恶意软件不断发展，并且在表现出恶意行为之前涉及复杂的图形用户界面(GUI)。

因此，在本领域中存在解决上述缺陷和不足的未解决的需求。

发明内容

本公开提供了一种自动确定图形用户界面(GUI)中的待交互的交互式GUI元素的计算机实现的方法、设备以及非暂时性计算机可读存储介质。

根据一方面，提出了一种计算机实现的方法，该方法自动确定图形用户界面(GUI)中的待交互的交互式GUI元素。该方法包括：处理器基于多个算法在GUI中检测一个或多个候选交互式GUI元素；所述处理器为所述一个或多个候选交互式GUI元素中的每个确定似然性指示符，所述似然性指示符指示与该似然性指示符相关联的候选交互式GUI元素是待交互的交互式GUI元素的似然性；以及所述处理器基于似然性指示符从一个或多个候选交互式GUI元素中确定待交互的交互式GUI元素。

在某些实施例中，多个算法包括以下至少之一：基于应用编程接口API的算法；基于光学字符识别(OCR)的算法；以及基于熵的算法。

在某些实施例中，处理器基于多个算法在GUI中检测一个或多个候选交互式GUI元素的步骤包括：所述处理器通过使用GUI的API 从GUI中的一个或多个交互式GUI元素的每个中提取文本；所述处理器基于所提取的文本为所述一个或多个交互式GUI元素中的每个确定第一算法特定的似然性；对于所计算的第一算法特定的似然性大于第一算法特定的阈值的每个交互式GUI元素，所述处理器将该交互式GUI元素确定为候选交互式GUI元素。