[发明专利]一种穿戴设备及基于穿戴设备的交互方法在审
申请号: | 201910470231.1 | 申请日: | 2019-05-31 |
公开(公告)号: | CN110208946A | 公开(公告)日: | 2019-09-06 |
发明(设计)人: | 邵继洋;毕育欣;孙剑;訾峰;丁亚东;刘炳鑫 | 申请(专利权)人: | 京东方科技集团股份有限公司;北京京东方光电科技有限公司 |
主分类号: | G02B27/01 | 分类号: | G02B27/01;G06F3/01;G06K9/00 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 王刚 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 穿戴设备 盲文 处理单元 控制信号 目标识别 指套组件 感知 控制信号发送 摄像头 输出 场景图像 辅助用户 辅助作用 结果转化 突起单元 突起阵列 图像采集 眼镜主体 用户视力 突起 视力 图像 场景 | ||
本发明实施例公开了一种穿戴设备及基于穿戴设备的交互方法,该穿戴设备中,眼镜主体上设置的摄像头针对用户所在的场景进行图像采集,第一处理单元获取对图像进行目标识别的识别结果,将识别结果转化为盲文控制信号,将盲文控制信号发送至指套组件中的第二处理单元,第二处理单元通过控制可突起阵列中的可突起单元是否突起,输出该盲文控制信号对应的盲文;这样,即使用户视力较差,用户也可以通过感知指套组件输出的盲文,得到对场景图像的目标识别结果,该识别结果可以辅助用户更好的感知周围环境;可见,本方案起到了对视力较差的人的辅助作用。
技术领域
本发明涉及电子设备技术领域,特别是指一种穿戴设备及基于穿戴设备的交互方法。
背景技术
日常生活中,视力较差的人不能较好地感知周围的环境,比如,他们不能准确识别环境中的运动目标,如车辆、行人等,也不能准确识别环境中的静止目标,如障碍物、交通灯等。一般来说,这些人通常需要其他人陪同,或者需要导盲犬的帮助。目前,亟需一种能够辅助这些人进行日常活动的方案。
发明内容
有鉴于此,本发明的目的在于提出一种穿戴设备及基于穿戴设备的交互方法,以起到对视力较差的人的辅助作用。
基于上述目的,本发明提供了一种穿戴设备,包括:眼镜组件和指套组件;其中,所述眼镜组件包括眼镜主体、以及设置于所述眼镜主体上的摄像头和第一处理单元;所述指套组件包括指套主体、以及设置于所述指套主体上的可突起阵列和第二处理单元,所述可突起阵列包括多个可突起单元;
所述摄像头,用于采集图像,并将所述图像发送至所述第一处理单元;
所述第一处理单元,用于接收所述图像,获取对所述图像进行目标识别的识别结果,将所获取的识别结果转化为盲文控制信号,将转化得到的盲文控制信号发送至所述第二处理单元;
所述第二处理单元,用于接收所述第一处理单元发送的盲文控制信号,通过控制所述可突起阵列中的可突起单元是否突起,输出所接收到的盲文控制信号对应的盲文。
在一些实施方式中,所述第二处理单元,还用于确定盲文控制信号对应的盲文点数,根据所述盲文点数,在所述可突起阵列中确定待处理的可突起单元,通过控制所述待处理的可突起单元是否突起,输出所接收到的盲文控制信号对应的盲文。
在一些实施方式中,所述眼镜组件还包括设置于所述眼镜主体上的传感器;所述传感器,用于获取所述眼镜组件的姿态信息,将所述姿态信息发送至所述第一处理单元;
所述第一处理单元,还用于基于所述姿态信息,对所述图像进行校准,获取对校准后的图像进行目标识别的识别结果。
在一些实施方式中,所述第一处理单元,还用于基于所述校准后的图像以及所述摄像头的参数,计算目标与所述摄像头之间的距离,作为所述识别结果。
在一些实施方式中,所述第一处理单元,还用于通过对所述摄像头采集的连续多帧图像进行目标跟踪,得到目标的运动趋势,作为所述识别结果。
在一些实施方式中,所述穿戴设备还包括麦克风,所述麦克风,用于采集语音数据,将所述语音数据发送至所述第一处理单元;
所述第一处理单元,还用于通过解析所述语音数据,得到待执行指令,基于所述待执行指令获取所述识别结果。
在一些实施方式中,所述眼镜组件与移动终端通信连接,所述第一处理单元,还用于获取与所述移动终端的交互信息,将所述交互信息转化为盲文控制信号。
在一些实施方式中,所述第一处理单元,还用于在所述移动终端中存在通知消息的情况下,识别所述通知消息的类型及发起对象,作为所述交互信息。
在一些实施方式中,所述摄像头,还用于采集所述移动终端的界面图像,将所述界面图像发送至所述第一处理单元;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司;北京京东方光电科技有限公司,未经京东方科技集团股份有限公司;北京京东方光电科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910470231.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种车载用抬头显示器
- 下一篇:基于人眼追踪的显示设备及显示方法