[发明专利]驾驶员视线检测方法、系统、介质及设备有效
申请号: | 201710716167.1 | 申请日: | 2017-08-18 |
公开(公告)号: | CN109409172B | 公开(公告)日: | 2021-08-13 |
发明(设计)人: | 金会庆;王江波;李伟;程泽良;马晓峰 | 申请(专利权)人: | 安徽三联交通应用技术股份有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/02 |
代理公司: | 上海光华专利事务所(普通合伙) 31219 | 代理人: | 王华英 |
地址: | 230001 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 驾驶员 视线 检测 方法 系统 介质 设备 | ||
1.一种驾驶员视线检测方法,其特征在于,包括:
通过登录界面进行硬件上电操作开启系统,配置通信参数信息,初始化图像信息采集设备,预设信息处理逻辑;
与服务器端建立通信连接,并接收系统版本信息;
检测所述系统版本、存储设备及所述图像信息采集设备,完成检测并发出处理触发信息;
接收所述处理触发信息,根据所述处理触发信息触发系统采集视频数据,从所述视频数据中提取单帧图片信息并保存为图像分析样本;
提取当前所述单帧图片信息中的转头方向特征信息和视线角度特征信息,根据所述转头方向特征信息和视线角度特征信息构建视线深度神经网络模型,根据所述图像分析样本进行所述视线深度神经网络模型的深度学习;
根据所述深度神经网络模型对比转头方向特征信息、视线角度特征信息与所述图像分析样本得所述驾驶员视线正误判定信息,识别驾驶员的面部在驾驶过程中观察左B柱、左后视镜、内后视镜、俯视仪表盘、右B柱、右后视镜、正前方、低头看档八个动作特征;
将所述单帧图片信息、所述驾驶员视线正误判定信息存入检测信息和视频数据队列中,根据所述队列产生日志信息并存储,管理所述日志信息并发送至所述服务器端;
其中,所述通过界面进行硬件上电操作,配置通信参数信息,初始化图像信息采集设备,预设信息处理逻辑,包括:开启硬件设备;检测所述硬件设备,判断所述硬件设备是否已安装;若是,则初始化所述通信参数信息、摄像头;若否,则在所述硬件设备上安装系统;预设心率阈值和信息处理逻辑,包括对逻辑控制功能中包含的视频处理控制逻辑、图像算法的选则信息,图像处理算法及摄像头的监测周期及开关状态信息进行预审,完成线程管理、视频处理控制、视频数据推送、图像算法调用、算法结果维护逻辑预设。
2.根据权利要求1所述的方法,其特征在于,所述与服务器端建立通信连接并接收系统版本信息,包括:
向所述服务器端发送连接请求信息;
判断是否接收到服务器端发来的观察指令;
若是,则判定与所述服务器端建立连接;
若否,则持续发送所述连接请求信息直至与所述服务器端建立连接;
上行传输驾驶员的视线监测信息、驾驶员的驾驶状态信息及所述驾驶员视线正误判定信息;
判断是否接收到服务器端发来的停止指令;
若是,则保存当前所述视频数据;
若否,则继续处理所述视频数据。
3.根据权利要求1所述的方法,其特征在于,所述检测所述系统版本、存储设备及所述图像信息采集设备,完成检测并发出处理触发信息,包括:
与维护后台建立通信连接;
检测所述通信连接是否畅通并返回检测结果;
获取维护后台发来的最新版本信息;
根据所述最新版本信息判断所述系统是否升级;
若是,则判定所述系统为最新版本;
若否,则根据所述维护后台发来的升级信息进行系统升级;
检测存储硬盘、摄像头,获取磁盘检测信息、摄像头检测信息;
根据所述磁盘检测信息、所述摄像头检测信息判断系统状态是否正常;
若是,则发出处理触发信息;
若否,则继续检测系统版本信息、所述存储硬盘、所述摄像头。
4.根据权利要求1或3所述的方法,其特征在于,所述处理触发信息触发系统采集视频数据,从所述视频数据中提取单帧图片信息并保存为图像分析样本,包括:
接收所述处理触发信息,根据所述处理触发信息开启所述摄像头;
以摄像头实时获取驾驶人的所述视频数据;
根据所述视频数据及时间提取当前的所示单帧图片信息;
保存所述单帧图片信息;
聚集所述单帧图片信息得所述图像分析样本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于安徽三联交通应用技术股份有限公司,未经安徽三联交通应用技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710716167.1/1.html,转载请声明来源钻瓜专利网。