[发明专利]一种基于眼部识别的信息采集系统及其应用

权利要求书

1.一种基于眼部识别的信息采集系统，其特征在于：它包括用户信息采集模块、人脸与人眼识别模块、确定用户眼部注视屏幕区域模块和确定用户屏幕区域关注内容模块；所述用户信息采集模块将采集到的用户脸部视频信息传输至所述人脸与人眼识别模块，所述人脸与人眼识别模块对每一帧用户视频信息进行人脸与人眼识别处理后传输至所述确定用户眼部注视屏幕区域模块，所述确定用户眼部注视屏幕区域模块对输入信息进行处理后得到用户眼部注视的屏幕区域的位置坐标，并将位置坐标传输至所述确定用户屏幕区域关注内容模块，所述确定用户屏幕区域关注内容模块对用户关注内容进行确定。

2.如权利要求1所述的一种基于眼部识别的信息采集系统，其特征在于：所述用户采集模块对在电脑或者移动终端前上网用户的正面脸部视频信息采集时，采用外接摄像头或内置摄像头。

3.如权利要求1所述的一种基于眼部识别的信息采集系统，其特征在于：所述人脸与人眼识别模块包括灰度处理模块、人脸识别模块、人眼识别模块和眼部区域信息判断模块；所述灰度处理模块对接收到的每一帧用户脸部视频信息进行灰度化处理后，得到每一帧用户脸部视频信息的灰度图像并传输至所述人脸识别模块和人眼识别模块；所述人脸识别模块利用开源图像视频处理库中的人脸分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人脸识别后，得到每一帧灰度图像中人脸的区域位置，所述人眼识别模块利用开源图像视频处理库中的人眼分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人眼识别后，得到每一帧灰度图像中人眼的区域位置，得到的每一帧灰度图像中的人脸和人眼的区域位置信息传输至所述眼部区域信息判断模块；所述眼部区域信息判断模块根据每一帧灰度图像中人脸的区域位置，判断得到的每一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理，如果合理，则将用户的眼白左右两端位置、眼球左右两端位置和瞳孔中心在每一帧灰度图像中的坐标信息传输至所述确定用户眼部注视屏幕区域模块；否则，继续判断下一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理。

4.如权利要求2所述的一种基于眼部识别的信息采集系统，其特征在于：所述人脸与人眼识别模块包括灰度处理模块、人脸识别模块、人眼识别模块和眼部区域信息判断模块；所述灰度处理模块对接收到的每一帧用户脸部视频信息进行灰度化处理后，得到每一帧用户脸部视频信息的灰度图像并传输至所述人脸识别模块和人眼识别模块；所述人脸识别模块利用开源图像视频处理库中的人脸分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人脸识别后，得到每一帧灰度图像中人脸的区域位置，所述人眼识别模块利用开源图像视频处理库中的人眼分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人眼识别后，得到每一帧灰度图像中人眼的区域位置，得到的每一帧灰度图像中的人脸和人眼的区域位置信息传输至所述眼部区域信息判断模块；所述眼部区域信息判断模块根据每一帧灰度图像中人脸的区域位置，判断得到的每一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理，如果合理，则将用户的眼白左右两端位置、眼球左右两端位置和瞳孔中心在每一帧灰度图像中的坐标信息传输至所述确定用户眼部注视屏幕区域模块；否则，继续判断下一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理。

5.如权利要求1或2或3或4所述的一种基于眼部识别的信息采集系统，其特征在于：所述确定用户眼部注视屏幕区域模块对输入的用户眼白左右两端位置、眼球左右两端位置和瞳孔中心在每一帧灰度图像中的坐标信息进行分类判断时所用的分类器包含的信息为：用户眼白的左右两端位置在灰度图像中的坐标、用户眼球左右两端位置在灰度图像中的坐标和用户瞳孔的中心位置在灰度图像中的坐标。

6.如权利要求1或2或3或4所述的一种基于眼部识别的信息采集系统，其特征在于：所述确定用户屏幕区域关注内容模块包括关注时间判断模块和点击判断模块；所述关注时间判断模块通过比较用户注视屏幕区域的时间t与设定的时间阈值t₀之间的关系，判断用户对所注视屏幕区域的内容是否关注；如果t>t₀，则判断用户对所注视屏幕区域的内容关注，并且t越大，表明用户对所注视屏幕区域的内容越关注；如果t<t₀，则所述点击判断模块对用户所注视屏幕区域的内容做进一步判断，如果用户点击其注视的屏幕区域，则判断用户注视的屏幕区域内容即为用户关注的内容；如果用户未点击其注视的屏幕区域，则判断用户点击的屏幕区域内容不是用户关注的内容。