[发明专利]监测人眼注视时间的方法和装置、存储介质、电子设备

权利要求书

1.一种监测人眼注视时间的方法，其特征在于，所述方法包括：

通过电子设备的前置摄像头按照预设频率采集3D人脸图像；

对所述3D人脸图像对应的3D点云数据进行三维重建得到人眼的位置信息；根据所述人眼的位置信息从所述3D人脸图像中获取3D人眼图像；调用3D人脸识别模型对所述3D人眼图像中的眼球信息、焦点信息进行分析，判断出所述3D人脸图像中的人眼是否注视所述电子设备的屏幕；其中，判断出所述3D人脸图像中的人眼是否注视所述电子设备的屏幕地过程为离线处理过程；所述3D人脸识别模型的训练过程，包括：

预先通过电子设备的前置摄像头采集多张3D人脸图像，对所述3D人脸图像中的人眼是否注视电子设备的屏幕进行标注，得到所述3D人脸图像的标注信息；

对所述3D人脸图像对应的3D点云数据进行三维重建得到人眼的位置信息；

根据所述人眼的位置信息从所述3D人脸图像中获取3D人眼图像；

将所述3D人眼图像与所述人眼所属的3D人脸图像的标注信息输入神经网络中进行训练，得到3D人脸识别模型；

根据判断结果计算所述3D人脸图像中的人眼持续注视所述电子设备的屏幕的时间，得到人眼的持续注视时间。

2.根据权利要求1所述的方法，其特征在于，所述多张3D人脸图像包括不同年龄段、不同性别的用户注视屏幕的人脸图像及非注视屏幕的人脸图像，所述注视屏幕的人脸图像包含从不同角度注视电子设备屏幕的人脸图像。

3.根据权利要求2所述的方法，其特征在于，所述不同角度包括正视角度、斜视角度中的任意一种。

4.根据权利要求1所述的方法，其特征在于，在根据判断结果计算所述3D人脸图像中的人眼持续注视所述电子设备的屏幕的时间，得到人眼的持续注视时间之后，包括：

判断所述持续注视时间是否达到预设时间阈值；

若是，则生成提醒信号；

若否，则继续统计持续注视时间。

5.根据权利要求4所述的方法，其特征在于，在判断出所述持续注视时间未超过预设时间阈值，则继续统计持续注视时间之后，包括：

当检测到本次持续注视时间出现间断时，记录间断时间；

判断所述间断时间是否达到预设休息时间；

若是，则结束计算本次持续注视时间，所述本次持续注视时间中不包含所述间断时间；

若否，则将所述间断时间计算入本次持续注视时间，且继续统计本次持续注视时间。

6.根据权利要求4所述的方法，其特征在于，所述提醒信号以弹窗的形式出现在电子设备的屏幕上。

7.一种监测人眼注视时间装置，其特征在于，所述装置包括：

3D人脸图像采集模块，用于通过电子设备的前置摄像头按照预设频率采集3D人脸图像；

判断模块，用于对所述3D人脸图像对应的3D点云数据进行三维重建得到人眼的位置信息；根据所述人眼的位置信息从所述3D人脸图像中获取3D人眼图像；调用3D人脸识别模型对所述3D人眼图像中的眼球信息、焦点信息进行分析，判断出所述3D人脸图像中的人眼是否注视所述电子设备的屏幕；其中，判断出所述3D人脸图像中的人眼是否注视所述电子设备的屏幕地过程为离线处理过程；

持续注视时间计算模块，用于根据判断结果计算所述3D人脸图像中的人眼持续注视所述电子设备的屏幕的时间，得到人眼的持续注视时间；

3D人脸识别模型训练模块，用于预先通过电子设备的前置摄像头采集多张3D人脸图像，对3D人脸图像中的人眼是否注视电子设备的屏幕进行标注，得到3D人脸图像的标注信息；对3D人脸图像对应的3D点云数据进行三维重建得到人眼的位置信息；根据人眼的位置信息从3D人脸图像中获取3D人眼图像；将3D人眼图像与人眼所属的3D人脸图像的标注信息输入神经网络中进行训练，得到3D人脸识别模型。