[发明专利]电子装置、控制方法和计算机可读介质

说明书

本发明涉及一种电子装置、控制方法和计算机可读介质。根据本发明的电子装置是能够通过拍摄经由眼睛窗框观看显示单元的画面的眼睛的图像来获取眼睛图像的电子装置，并且包括：估计单元，其被配置为基于所述眼睛图像来估计所述画面上的所述眼睛的视点；以及检测单元，其被配置为基于所述眼睛图像上的瞳孔图像或Purkinje图像的位置，来检测在所述眼睛图像上所述眼睛相对于与所述画面的中心相对应的位置发生偏移的偏移查看状态。

技术领域

本发明涉及能够估计(检测)视点的电子装置。

背景技术

近年来见证了照相机的自动化和智能化的进步。日本特开2004-8323提出了如下的技术，该技术用于在无需手动输入被摄体位置的情况下，基于与透过取景器进行观看的拍摄者的视点(视线位置)有关的信息来识别该拍摄者的期望被摄体并控制焦点。日本特开2009-104524提出了如下的技术，该技术通过除了考虑眼球的转动角度之外、还考虑头部的转动角度和位置，来提高视点检测的精度。PCT申请公开2018-506781的日文译文提出了如下的技术：设置多个眼球灯，并且通过根据与来自眼球灯的光是否正到达用户的眼球有关的判断结果切换所使用的的眼球灯来检测焦点。日本特开2014-64094提出了用于切换取景器内的显示装置上的图像显示范围(显示图像的范围)的技术。

利用日本特开2004-8323的技术，通过基于通过拍摄用户(拍摄者)的眼睛的图像所获取到的眼睛图像上的瞳孔图像和Purkinje图像(普尔钦图像)的位置检测眼球的转动角度来估计(检测)用户的视点。然而，在用户将他/她的面部相对于取景器等偏移、使得头部进行大的平移运动时，眼睛图像上的瞳孔图像和Purkinje图像也进行大的平移运动，结果不能以高精度估计视点。

利用日本特开2009-104524的技术，通过拍摄整个面部而不仅仅是眼睛的图像、并且根据面部的特征点检测头部的位置和倾斜使得除了眼球的转动角度之外还考虑头部的位置和倾斜，来提高视点估计精度。然而，需要用于拍摄整个面部(整个头部)的图像的结构，这会增加装置的复杂度和成本。此外，在头部被隐藏且不能拍摄到头部的图像的状态(诸如用户正透过照相机的取景器进行观看的状态或者用户正佩戴VR眼镜(VR护目镜)的状态等)下，无法提高视点估计精度。

利用PCT申请公开2018-506781的日文译文，通过根据状况切换所使用的眼球灯来检测焦点。然而，由眼球灯产生的重像可能出现在眼睛图像上，这使得不能以高精度估计视点。

利用日本特开2014-64094的技术，为了省电而不是估计视点的目的，通常使显示装置上的图像显示范围变窄。因此，在估计视点时，图像显示范围不能切换到适当的范围，结果不能以高精度估计视点。

发明内容

本发明提供使得能够通过简单结构来检测不能以高精度进行视点估计的状态的技术。

本发明在其第一方面中提供一种电子装置，其能够通过拍摄经由眼睛窗框观看显示单元的画面的眼睛的图像来获取眼睛图像，所述电子装置包括：第一估计单元，其被配置为基于所述眼睛图像来估计所述画面上的所述眼睛的视点；以及检测单元，其被配置为基于所述眼睛图像上的瞳孔图像或者普尔钦图像即Purkinje图像的位置，来检测在所述眼睛图像上所述眼睛相对于与所述画面的中心相对应的位置发生偏移的偏移查看状态。

本发明在其第二方面中提供一种电子装置的控制方法，所述电子装置能够通过拍摄经由眼睛窗框观看显示单元的画面的眼睛的图像来获取眼睛图像，所述控制方法包括：基于所述眼睛图像来估计所述画面上的所述眼睛的视点；以及基于所述眼睛图像上的瞳孔图像或者普尔钦图像即Purkinje图像的位置，来检测在所述眼睛图像上所述眼睛相对于与所述画面的中心相对应的位置发生偏移的偏移查看状态。