[发明专利]一种多功能AR眼镜及其交互方法在审
| 申请号: | 202110940972.9 | 申请日: | 2021-08-17 |
| 公开(公告)号: | CN113608621A | 公开(公告)日: | 2021-11-05 |
| 发明(设计)人: | 张晓峰;刘波;夏志龙 | 申请(专利权)人: | 融信信息科技有限公司 |
| 主分类号: | G06F3/01 | 分类号: | G06F3/01;G06K9/62;G06N3/04;G06N3/08;G02B27/01 |
| 代理公司: | 安徽思沃达知识产权代理有限公司 34220 | 代理人: | 戴晓丹 |
| 地址: | 200125 上*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 多功能 ar 眼镜 及其 交互 方法 | ||
1.一种多功能AR眼镜,包括镜圈(1),其特征在于,所述镜圈(1)的内部设置有镜片(2),所述镜片(2)的上方设置有镜框(3),所述镜框(3)的外壁上活动连接有镜脚(4);
其中,所述镜片(2)用于进行影像显示,所述镜框(3)上包括蓝牙模块、WIFI模块、眼球视频采集模块、脑电波触发模块、中央处理模块、蓄电池模块和无线充电模块;所述镜脚(4)上包括脑电波信号采集模块、脑电波信号预处理模块、深度学习模块和音频播放模块。
2.根据权利要求1所述的一种多功能AR眼镜,其特征在于,所述蓝牙模块与外部智能终端无线连接,用于传输智能终端数据;所述WIFI模块用于联网;所述眼球视频采集模块设置于所述镜框(3)的内侧壁上,其具体为摄像装置,用于采集人体眼球视频;所述脑电波触发模块用于提取眼球视频采集模块采集到的人体眼球视频,并识别判断其是否符合设定触发规则,若符合,则触发脑电波信号采集模块启动。
3.根据权利要求2所述的一种多功能AR眼镜,其特征在于,所述设定触发规则包括但不限于眼睛聚焦五秒以上、连续眨眼六次以上、眼球转动三圈和同时闭一只眼睁一只眼。
4.根据权利要求3所述的一种多功能AR眼镜,其特征在于,所述脑电波信号采集模块设置于镜脚(4)的内侧壁上,其具体为脑电波电极片,用于采集人体脑电波信号;所述脑电波信号预处理模块包括差分放大单元、滤波单元和AD转换单元。
5.根据权利要求4所述的一种多功能AR眼镜,其特征在于,所述差分放大单元具体为八个独立的差分输入的程控增益放大器,用于将电极片采集到的人体脑电波信号进行信号放大;所述滤波器单元用于去除人体脑电波信号采集过程中的工频干扰;所述AD转换单元用于将人体脑电波信号进行模数转换,得到脑电波数字信号。
6.根据权利要求1所述的一种多功能AR眼镜,其特征在于,所述深度学习模块用于获取经过脑电波信号预处理模块处理后得到的脑电波数字信号,并进行学习训练,得到感知判别模型,其具体过程如下:
S1:首先,获取用户在不同情感下的大量脑电波数字信号;
S2:然后,同时将不同情感下的大量脑电波数字信号与控制命令进行一一对应,形成样本集;
S3:接着,将样本集划分为70%的训练集和30%的测试集;
S4:之后,搭建卷积神经网络,并将所述70%的训练集作为输入数据输入其中进行学习训练,得到感知判别模型;
S5:最后,利用所述30%的测试集对所述感知判别模型进行测试,若准确率达到95%,则输出该模型,反之,进行脑电波重采样,直至模型符合预期。
7.根据权利要求1所述的一种多功能AR眼镜,其特征在于,所述中央处理模块用于接收脑电波数字信号并根据感知判别模型进行人机交互,形成交互指令;所述蓄电池模块用于供电;所述无线充电模块用为蓄电池模块提供无线充电;所述音频播放模块交互指令进行音频播放。
8.一种多功能AR眼镜的交互方法,其特征在于,该交互方法具体如下:
步骤一、设备连接或联网:首先,通过蓝牙模块或WIFI模块实现与外部智能终端连接或实现联网;
步骤二、眼球视频采集及规则触发:然后,采集眼球视频并根据设定触发规则触发脑电波信号采集模块启动;
步骤三、脑电波信号采集及处理:通过脑电波信号采集模块获取用户在不同情感下的大量脑电波数字信号,并进行预处理,形成脑电波数字信号;
步骤四、脑电波学习:通过深度学习模块对所述脑电波数字信号进行控制命令关联和学习训练,得到感知判别模型;
步骤五、人机交互:最后通过中央处理模块接收脑电波数字信号并根据感知判别模型进行人机交互,形成交互指令,控制镜片(2)和音频播放模块进行交互反馈。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于融信信息科技有限公司,未经融信信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110940972.9/1.html,转载请声明来源钻瓜专利网。





