[发明专利]注视点计算方法、装置及设备

权利要求书

1.一种注视点计算方法，其特征在于，包括：

确定第一场景的三维空间模型；

获取在所述第一场景拍摄的第一全景图像，所述第一全景图像中包括人脸的人脸图像；

根据所述第一全景图像，确定所述人脸的空间位置；

根据所述第一全景图像，确定所述人脸中人眼的视线方向；

根据所述三维空间模型、所述空间位置和所述视线方向，确定所述人眼的注视对象；

根据所述第一全景图像，确定所述人脸的空间位置，包括：

确定所述人脸相对于第一拍摄设备的角度坐标，所述第一拍摄设备为拍摄所述第一全景图像的设备；

确定所述人脸相对于所述第一拍摄设备的空间距离；

根据所述角度坐标和所述空间距离，确定所述空间位置；

根据所述三维空间模型、所述空间位置和所述视线方向，确定所述人眼的注视对象，包括：

根据所述三维空间模型、所述空间位置和所述视线方向，在所述三维空间模型中确定人眼注视区域；

根据所述人眼注视区域，确定所述人眼的注视对象；

根据所述三维空间模型、所述空间位置和所述视线方向，在所述三维空间模型中确定人眼注视区域，包括：

根据所述视线方向和所述空间位置，确定人眼视线模型；

根据所述三维空间模型和所述人眼视线模型，在所述三维空间模型中确定人眼注视区域；

根据所述人眼注视区域，确定所述人眼的注视对象，包括：

根据如下公式，确定所述人眼注视区域中各子区域对应的分布密度，所述分布密度用于指示人眼注视区域中注视点的分布密度；

其中，d表示当前场景三维结构中元素与视线直线间的法向距离；d_max为设置的筛选阈值；

根据所述分布密度和所述三维空间模型中包括的对象，确定所述人眼的注视对象。

2.根据权利要求1所述的方法，其特征在于，确定所述人脸相对于第一拍摄设备的角度坐标，包括：

在所述第一全景图像中确定人脸检测区域；

获取每个人脸检测区域对应的第一透视图像；

对所述第一透视图像进行人脸检测，确定每张第一透视图像中的人脸图像的第一坐标，所述第一坐标为所述人脸图像在对应的第一透视图像中的坐标；

根据每张第一透视图像中的人脸图像的第一坐标，确定每张第一透视图像中人脸图像对应的人脸相对于第一拍摄设备的角度坐标。

3.根据权利要求1或2所述的方法，其特征在于，确定第一场景的三维空间模型，包括：

在第二场景图像中确定场景重建区域；

获取每个场景重建区域对应的第二透视图像；

对所述第二透视图像进行单幅图像三维估计，得到所述第二透视图像的深度图像；

根据每张第二透视图像的深度图像，确定所述三维空间模型。