[发明专利]一种基于眼部识别的信息采集系统及其应用

说明书

技术领域

本发明涉及一种信息采集系统及其应用，特别是关于一种基于眼部识别的信息采集系统及其应用。

背景技术

随着电脑和移动终端设备的日益普及，越来越多的用户会在开启视频的情况下浏览网络上所关注的内容，而目前网络上的页面布局是面向所有用户的，对每个用户而言未进行个性化页面布局设置，从而导致用户在网络信息中寻找自己关注内容时非常耗时。

对用户关注电脑或移动终端设备屏幕信息的采集方法通常有两种：鼠标点击法和个人输入法。由于用户在对屏幕上的页面信息进行浏览时，不会对所有内容都用鼠标点击，并且用鼠标点击的内容中也会存在一些误点击的内容，因此用鼠标点击法采集用户关注电脑或移动终端设备屏幕信息时存在不全面和不准确的缺陷。与此同时，用户在浏览页面时，为了方便,可能会直接在网站输入框中输入自己感兴趣的内容,进而对这些内容进行搜索,通过对用户输入的内容进行分析也可以采集用户的信息。但是，用户显然不会对其所有关注和感兴趣的所有内容都进行输入，因此,传统的两种采集方法都存在着不够准确、不全面的缺点。

发明内容

针对上述问题，本发明的目的是提供一种能全面、准确地确定用户屏幕区域关注的内容，以实现对电脑或移动终端页面进行重新布局的基于眼部识别的信息采集系统及其应用。

为实现上述目的，本发明采取以下技术方案：一种基于眼部识别的信息采集系统，其特征在于：它包括用户信息采集模块、人脸与人眼识别模块、确定用户眼部注视屏幕区域模块和确定用户屏幕区域关注内容模块；所述用户信息采集模块将采集到的用户脸部视频信息传输至所述人脸与人眼识别模块，所述人脸与人眼识别模块对每一帧用户视频信息进行人脸与人眼识别处理后传输至所述确定用户眼部注视屏幕区域模块，所述确定用户眼部注视屏幕区域模块对输入信息进行处理后得到用户眼部注视的屏幕区域的位置坐标，并将位置坐标传输至所述确定用户屏幕区域关注内容模块，所述确定用户屏幕区域关注内容模块对用户关注内容进行确定。

所述用户采集模块对在电脑或者移动终端前上网用户的正面脸部视频信息采集时，采用外接摄像头或内置摄像头。

所述人脸与人眼识别模块包括灰度处理模块、人脸识别模块、人眼识别模块和眼部区域信息判断模块；所述灰度处理模块对接收到的每一帧用户脸部视频信息进行灰度化处理后，得到每一帧用户脸部视频信息的灰度图像并传输至所述人脸识别模块和人眼识别模块；所述人脸识别模块利用开源图像视频处理库中的人脸分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人脸识别后，得到每一帧灰度图像中人脸的区域位置，所述人眼识别模块利用开源图像视频处理库中的人眼分类器对接收到的每一帧用户脸部视频信息的灰度图像进行人眼识别后，得到每一帧灰度图像中人眼的区域位置，得到的每一帧灰度图像中的人脸和人眼的区域位置信息传输至所述眼部区域信息判断模块；所述眼部区域信息判断模块根据每一帧灰度图像中人脸的区域位置，判断得到的每一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理，如果合理，则将用户的眼白左右两端位置、眼球左右两端位置和瞳孔中心在每一帧灰度图像中的坐标信息传输至所述确定用户眼部注视屏幕区域模块；否则，继续判断下一帧灰度图像中的眼部区域及眼球区域的位置信息是否合理。

所述确定用户眼部注视屏幕区域模块对输入的用户眼白左右两端位置、眼球左右两端位置和瞳孔中心在每一帧灰度图像中的坐标信息进行分类判断时所用的分类器包含的信息为：用户眼白的左右两端位置在灰度图像中的坐标、用户眼球左右两端位置在灰度图像中的坐标和用户瞳孔的中心位置在灰度图像中的坐标。

所述确定用户屏幕区域关注内容模块包括关注时间判断模块和点击判断模块；所述关注时间判断模块通过比较用户注视屏幕区域的时间t与设定的时间阈值t₀之间的关系，判断用户对所注视屏幕区域的内容是否关注；如果t>t₀，则判断用户对所注视屏幕区域的内容关注，并且t越大，表明用户对所注视屏幕区域的内容越关注；如果t<t₀，则所述点击判断模块对用户所注视屏幕区域的内容做进一步判断，如果用户点击其注视的屏幕区域，则判断用户注视的屏幕区域内容即为用户关注的内容；如果用户未点击其注视的屏幕区域，则判断用户点击的屏幕区域内容不是用户关注的内容。