[发明专利]一种头戴式眼动跟踪操作辅助的智能装置在审
| 申请号: | 201910627243.0 | 申请日: | 2019-07-12 |
| 公开(公告)号: | CN110531516A | 公开(公告)日: | 2019-12-03 |
| 发明(设计)人: | 徐凯;赵其杰;孔耀辉;韩书航 | 申请(专利权)人: | 上海大学 |
| 主分类号: | G02B27/01 | 分类号: | G02B27/01;G02B27/00 |
| 代理公司: | 31205 上海上大专利事务所(普通合伙) | 代理人: | 何文欣<国际申请>=<国际公布>=<进入 |
| 地址: | 200444*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 投影 监测模块 姿态调节 头戴式 图像 图像采集模块 可折叠支架 采集图像 操作辅助 交互模块 生理信息 视频监测 通信模块 头部姿态 显示模块 用户视线 智能装置 护目镜 可折叠 折叠 处理器 眼动 变形 采集 保证 跟踪 监测 | ||
1.一种头戴式眼动跟踪操作辅助的智能装置,包括通信模块(I)、显示模块(Ⅱ)、交互模块(Ⅲ)、监测模块(Ⅵ)、图像采集模块(Ⅳ)、生理信息监测模块(Ⅴ)、投影姿态调节模块(Ⅶ)、视频监测姿态调节模块(Ⅶ)、处理器(Ⅸ)、头戴式可折叠支架(Ⅹ),其特征在于,所述处理器(Ⅸ)连接通信模块(I)、显示模块(Ⅱ)、交互模块(Ⅲ)、监测模块(Ⅵ)、图像采集模块(Ⅳ)、生理信息监测模块(Ⅴ)、投影姿态调节模块(Ⅶ)和视频监测姿态调节模块(Ⅶ),而安装在头戴式可折叠支架(Ⅹ)上,显示模块(Ⅱ)接处理器(Ⅸ)输出,显示辅助操作信息,其中一个微型投影仪(14)可通过投影姿态调节模块(Ⅶ)调节投影姿态;交互模块(Ⅲ)接处理器(Ⅸ)输入,交互模块(Ⅲ)感知用户操作意图,由处理器做出判断,发出控制信号;监测模块(Ⅵ)用于监测用户状态,一方面通过图像采集模块(Ⅳ)采集用户操作过程信息,另一方面通过生理信息监测模块(Ⅴ)监测用户生理状态;视频监测姿态调节模块(Ⅷ)用于调节图像采集模块(Ⅳ)的采集角度。
2.根据权利要求1所述的头戴式眼动跟踪操作辅助的智能装置,其特征在于显示模块(Ⅱ),包括微型投影仪(14)和显示屏(11)含有多种显示方式,显示屏显示,投影显示,外部输出接口。
3.根据权利要求2所述的头戴式眼动跟踪操作辅助的智能装置,其特征在于所述微型投影仪(14)能够自适应调整投影角度;微型投影仪(14)与所述姿态调节模块(Ⅲ)中的一个第二舵机(13)连接,第二舵机(13)与所述头戴式可折叠支架(Ⅹ)中的一个头带(12)固定连接,第二舵机(13)通过正转反转,将力矩传予微型投影仪(14),根据用户头部俯仰姿态实现调节微型投影仪(14)的俯仰角度。
4.根据权利要求1所述的头戴式眼动跟踪操作辅助的智能装置,其特征在于所述图像采集模块(Ⅳ)采集角度可自适应调节;所述生理信息监测模块(Ⅴ)包括生理信息传感器(17)和眼动仪(10),眼动仪(10)位于连接于所述头戴式可折叠支撑架(22)的连杆(9)上,采集图像提取眼部特征,处理器(7)对特征进行处理后,根据视线方向,向所述视频监测姿态调节模块(Ⅶ)中的一个第一舵机(1)发出控制信号,第一舵机(1)将力矩传给图像采集模块(8),使图像采集模块(Ⅳ)采集的图像位于视线中心。
5.根据权利要求1所述的头戴式可折叠眼动跟踪操作辅助智能装置,其特征在于具有监测预警功能,包括:视频监测预警技术,生理信息监测预警技术;
所述视频监测预警技术:通过图像采集模块(Ⅳ)采集用户视角画面,利用机器视觉技术对用户的操作过程全程记录并分析,对用户错误操作加以预警提示;
所述生理信息监测预警技术:通过生理信息监测模块中的一个生理信息传感器(17),检测用户生理信息:皮电,心率,以及基于眼动仪(10)的面部信息采集系统,采集面部信息,采集的用户生理信息包括面部信息,经过信息处理,判断用户工作状态疲惫,注意力分散。
6.根据权利要求1所述的头戴式可折叠眼动跟踪操作辅助的智能装置,其特征在于:所述交互通道包括眼动仪(10)、语音(23)和触摸板(2),交互模块(Ⅲ)的交互通道可以互相切换,包括主动切换,被动切换,主动切换由用户选择交互模式,被动切换由处理器(Ⅸ)针对操作过程自主切换,眼动模式可切换为语音模式、触摸板模式,语音模式可切换为眼动模式、触摸板模式,触摸板模式可切换为眼动模式、语音模式,交互模块(Ⅲ)的交互通道可互相协作,一个操作由多个过程组成,针对特定的过程采用不同交互通道。
7.根据权利要求4所述的头戴式可折叠眼动跟踪操作辅助的智能装置,其特征在于:含有基于眼动仪的用户界面显示操作,所述眼动仪(10)位于连接于支撑架(22)的连杆(9)上,采集用户的眼部特征,眼部特征信息交由处理器处理(Ⅸ),当视线向上时偏转时,显示界面向下移动;当视线向下偏转时,显示界面向上移动;当视线向左偏转时,显示界面向右移动;当视线向右偏转时,显示界面向左移动。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海大学,未经上海大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910627243.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种头戴连接装置及头戴设备
- 下一篇:一种基于智能语音识别的VR头显





