[发明专利]一种基于AR眼镜的双眼同时知觉检测和训练方法及系统在审
| 申请号: | 202211274017.7 | 申请日: | 2022-10-18 |
| 公开(公告)号: | CN115602286A | 公开(公告)日: | 2023-01-13 |
| 发明(设计)人: | 王建华;朱明;林瓊;陆春健;吴学海;施旭 | 申请(专利权)人: | 上海诠视传感技术有限公司 |
| 主分类号: | G16H20/30 | 分类号: | G16H20/30;G06F3/01 |
| 代理公司: | 上海大为知卫知识产权代理事务所(普通合伙) 31390 | 代理人: | 何银南 |
| 地址: | 200000 上海市*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 ar 眼镜 双眼 同时 知觉 检测 训练 方法 系统 | ||
1.一种基于AR眼镜的双眼同时知觉检测和训练方法,其特征在于,包括:
基于预设左眼和右眼检测图形建立检查用3D模型;
建立检查用背景模型,通过slam定位锚将所述检查用3D模型中的预设左眼和右眼检测图形定在从所述检查用背景模型中选定的检查用背景中,生成显示画面;
将所述检查用3D模型中的显示画面传输至AR眼镜的显示端中;
当被检查者佩戴所述AR眼镜发送启动信号时,播放预设语音提示信息;
基于所述预设语音提示信息,采集被检查者回复信息,对所述被检查者回复信息进行识别,确定被检查者检查数据,并将所述被检查者检查数据进行存储;
根据所述被检查者检查数据进行知觉检查分析及训练要求匹配,生成被检查者检测报告。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
获得所述检查用背景模型的背景资料库;
对被检查者进行信息采集,获得被检查者信息;
根据所述被检查者信息进行喜好特征分析,确定喜好特征,将所述喜好特征与所述背景资料库进行关联性分析,得到匹配背景资料,将所述匹配背景资料作为选定的检查用背景。
3.如权利要求1所述的方法,其特征在于,所述方法包括:
通过预设建模工具进行模型搭建;
将所述预设左眼和右眼检测图形导入Unity中,并调整搭建的模型至场景对应的位置;
将3D模型转换为显示画面。
4.如权利要求3所述的方法,其特征在于,所述将3D模型转换为显示画面,包括:
Unity调用底层图形接口,获得3D模型顶点;
通过顶点着色器-曲面细分着色器-几何着色器-裁剪-屏幕映射各阶段对所述顶点进行处理;
对处理好的顶点信息经过三角形处理-片元着色器-逐片元操作-输出显示画面阶段处理,生成所述显示画面。
5.如权利要求1所述的方法,其特征在于,所述方法还包括:
通过预设制图工具制作预设背景画面的纹理;
将纹理导入Unity中;
添加背景模型,通过Unity中材质工具将预设背景画面的纹理贴在所述背景模型上,经过CPU和GPU进行处理和渲染。
6.如权利要求1所述的方法,其特征在于,所述通过slam定位锚将所述检查用3D模型中的预设左眼和右眼检测图形定在从所述检查用背景模型中选定的检查用背景中,包括:
根据slam计算当前环境的坐标,结合Unity坐标计算得到物体处于环境中的位置坐标,将所述预设左眼和右眼检测图形设置在同一位置坐标进行锚定。
7.如权利要求1所述的方法,其特征在于,将所述检查用3D模型中的显示画面传输至AR眼镜的显示端,之后包括:
根据slam算法计算当前环境的实际坐标;
构建slam坐标与Unity坐标的转换关系;
获得AR眼镜头部坐标,根据所述AR眼镜头部坐标、实际坐标、slam坐标与Unity坐标的转换关系计算初始距离所在的位置,设置AR显示端初始距离。
8.如权利要求1所述的方法,其特征在于,所述方法还包括:
定时采集被检查者的训练信息;
根据所述被检查者检测报告中的训练要求与训练信息进行比对,确定定时训练评估信息;
判断所述定时训练评估信息是否满足训练要求,若不满足时,根据所述训练信息、训练要求在训练计划数据库中进行训练内容匹配,利用匹配到的训练内容对所述训练要求进行调整。
9.一种基于AR眼镜的双眼同时知觉检测和训练系统,其特征在于,所述系统包括:
模型构建单元,用于基于预设左眼和右眼检测图形建立检查用3D模型;
定位单元,用于建立检查用背景模型,通过slam定位锚将所述检查用3D模型中的预设左眼和右眼检测图形定在从所述检查用背景模型中选定的检查用背景中,生成显示画面;
AR显示单元,用于将所述检查用3D模型中的显示画面传输至AR眼镜的显示端中;
检测执行单元,用于当被检查者佩戴所述AR眼镜发送启动信号时,播放预设语音提示信息;
检测信息识别记录单元,用于基于所述预设语音提示信息,采集被检查者回复信息,对所述被检查者回复信息进行识别,确定被检查者检查数据,并将所述被检查者检查数据进行存储;
检测分析单元,用于根据所述被检查者检查数据进行知觉检查分析及训练要求匹配,生成被检查者检测报告。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海诠视传感技术有限公司,未经上海诠视传感技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211274017.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种带抓线功能的剪线装置
- 下一篇:一种基于双极膜技术的碱洗废水回用工艺





