[发明专利]利用视线落点与人机界面互动的方法

说明书

本发明系一种利用视线落点与人机界面互动的方法，系由以视线落点向外扩展产生虚拟视线落点框，而人机界面上各物件分别向外扩展产生物件标记框，当虚拟视线落点框与其中任一个物件标记框交叠，则表示为用户欲点选虚拟视线落点框交叠之物件标记框所属之物件，作为一候选物件，并在辨识周期内，计算该虚拟视线落点框与该人机界面其中任一该物件标记框交叠的次数及时间，再以该虚拟视线落点框与该人机界面其中任一该物件标记框交叠的次数及时间，决定出至少一个候选物件与执行物件，并执行此执行物件之动作。

技术领域

本发明系有关于人机界面互动之方法，尤其指一种利用视线落点与人机界面互动的方法。

背景技术

根据周小龙等人的「基于3D人眼模型的视线跟踪技术综述」论文(计算机辅助设计与图形学学报，第29卷第9期，2017年9月，第1579～1589页)提到，随着计算机视觉技术的飞速发展，视线跟踪技术已被广泛应用于诸多领域。最早是关于眼动的研究，集中在神经学、心理学和行为学等领域。后来，随着机器学习以及图像处理技术的发展，眼动的研究被带入视觉信息领域，通过结合机器学习、图像处理技术形成了现在的视线跟踪技术，成为当前一大研究热点。

同文亦提到，计算机的普及让人们能够通过计算机来提高工作效率，通过网络来进行知识共享及搜索。人机交互作为人与计算机的交互方式，已成为计算机研究领域一个非常重要的内容。然而，对于一些弱势群体，如残障人士，由于受到行动、语言能力的困扰，被隔绝于计算机和网络之外。

此时，视线跟踪技术作为一种使用时只需要眼睛的技术，为身障人士提供了一种全新的有效地与计算机交互的方式。在这样的人机交互中，视线跟踪的作用类似于鼠标的选择功能，而借助视线注视某点来实现点击操作，即利用视线落点选择或点击目标，无疑是一种比较便捷的方式。

但是视线控制的稳定性和精确度较难保证，也是基于视线跟踪技术的人机交互应用中的一大难点及挑战。然而此论文中只提到了如何提高视线落点的计算精准度，而且视线落点的精准度提高有限，在低成本的硬件配置下有许多的困难，而且也没有提到如何让视线落点与人机界面有效地进行互动，因此，如何在低成本的硬件配置下，利用视线落点与人机界面进行有效的互动，乃是目前亟需要解决的问题。

发明内容

有鉴于先前技术的问题，本发明之目的系为了利用视线落点与人机界面进行有效的互动，而且不论是使用高成本的硬件配置或者低成本的硬件配置，举凡可以人机界面上产生视线落点者，就可以有效地与人机界面上的物件进行有效的互动。

根据本发明之目的，系提供一种利用视线落点与人机界面互动的方法，包括由电子装置执行以下步骤，以视线落点为中心向外扩展产生虚拟视线落点框，而人机界面上各物件为中心分别向外扩展产生物件标记框，当虚拟视线落点框在辨识周期内，仅与人机界面其中任一个物件标记框交叠，则表示为用户欲点选虚拟视线落点框交叠之物件标记框所属之物件，作为一候选物件。

其中，电子装置在一辨识周期内，计算虚拟视线落点框与人机界面其中任一物件标记框交叠的次数及时间。

其中，电子装置在辨识周期内，虚拟视线落点框与人机界面其中一个物件标记框交叠，则确定为仅有一个候选物件，则候选做为执行物件，并执行此执行物件之动作。

其中，该虚拟视线落点框在辨识周期内，分别与人机界面其中任二个以上的物件标记框交叠，则确定为有二个以上的候选物件，再依据在辨识周期内虚拟视线落点框与交叠次数最高的其中一个候选物件，做为执行物件，并执行此执行物件之动作。

其中，当任二个以上的候选物件之交叠次数相同，再依据于辨识周期内交叠时间最多的候选物件，做为执行物件，并执行此执行物件之动作。

其中，当虚拟视线落点框在辨识周期内，分别与人机界面其中任二个以上的物件标记框交叠，则确定为有二个以上的候选物件，再依据在辨识周期内虚拟视线落点框与交叠时间最高的其中一个候选物件，做为执行物件，并执行此执行物件之动作。