[发明专利]一种设备交互方法、装置及电子设备在审
申请号: | 201911358781.0 | 申请日: | 2019-12-25 |
公开(公告)号: | CN113031757A | 公开(公告)日: | 2021-06-25 |
发明(设计)人: | 左亚军;董磊 | 申请(专利权)人: | 大众问问(北京)信息科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 北京乾成律信知识产权代理有限公司 11927 | 代理人: | 张梅珍;苏捷 |
地址: | 100098 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 设备 交互 方法 装置 电子设备 | ||
1.一种设备交互方法,其特征在于,包括:
确定用户在电子设备的屏幕中的注视区域;
基于所述注视区域,操作所述电子设备。
2.根据权利要求1所述的方法,其特征在于,所述确定用户在电子设备的屏幕中的注视区域,包括:
根据屏幕坐标系与眼部坐标系之间的转换关系,将用户眼部的普尔钦斑转换为用户在所述屏幕坐标系中的注视点;
所述基于所述注视区域,操作所述电子设备,包括:
若所述注视点位于所述电子设备的屏幕中,则唤醒所述电子设备;
或者,确定所述注视点在所述屏幕中对应的操作按钮;执行所述操作按钮对应的操作命令。
3.根据权利要求2所述的方法,其特征在于,所述根据屏幕坐标系与眼部坐标系之间的转换关系,将用户眼部的普尔钦斑转换为用户在所述屏幕坐标系中的注视点,包括:
获取待处理图像,所述待处理图像中包括用户的眼部;
检测所述待处理图像中的普尔钦斑,并确定所述普尔钦斑在眼部坐标系中的坐标;
根据屏幕坐标系与眼部坐标系之间的转换关系,将所述普尔钦斑在眼部坐标系中的坐标转换为用户的注视点在所述屏幕坐标系中的坐标。
4.根据权利要求3所述的方法,其特征在于,获得所述屏幕坐标系与眼部坐标系之间的转换关系的过程包括:
获取多张所述用户的注视点不同的眼部图像,所采集的眼部图像对应的注视点均位于所述电子设备的屏幕中;
针对每张眼部图像,确定普尔钦斑在眼部坐标系中的坐标、以及该张眼部图像对应的注视点在屏幕坐标系中的坐标;
基于所述普尔钦斑在眼部坐标系中的坐标和所述注视点在屏幕坐标系中的坐标,求解屏幕坐标系与眼部坐标系之间的转换关系。
5.根据权利要求4所述的方法,其特征在于,所述获取多张所述用户的注视点不同的眼部图像,包括:
输出第一提示信息,所述第一提示信息用于提示用户注视电子设备的屏幕中的第一点;在用户注视所述第一点时,采集第一眼部图像;
输出第二提示信息,所述第二提示信息用于提示用户注视电子设备的屏幕中的第二点;在用户注视所述第二点时,采集第二眼部图像;
输出第三提示信息,所述第三提示信息用于提示用户注视电子设备的屏幕中的第三点;在用户注视所述第三点时,采集第三眼部图像;
输出第四提示信息,所述第四提示信息用于提示用户注视电子设备的屏幕中的第四点;在用户注视所述第四点时,采集第四眼部图像;
输出第五提示信息,所述第五提示信息用于提示用户注视电子设备的屏幕中的第五点;在用户注视所述第五点时,采集第五眼部图像;
输出第六提示信息,所述第六提示信息用于提示用户注视电子设备的屏幕中的第六点;在用户注视所述第六点时,采集第六眼部图像;
所述针对每张眼部图像,确定普尔钦斑在眼部坐标系中的坐标、以及该张眼部图像对应的注视点在屏幕坐标系中的坐标,包括:
检测所述第一眼部图像中的普尔钦斑,作为第一普尔钦斑;并确定所述第一普尔钦斑在眼部坐标系中的坐标;确定所述第一点在屏幕坐标系中的坐标;
检测所述第二眼部图像中的普尔钦斑,作为第二普尔钦斑;并确定所述第二普尔钦斑在眼部坐标系中的坐标;确定所述第二点在屏幕坐标系中的坐标;
检测所述第三眼部图像中的普尔钦斑,作为第三普尔钦斑;并确定所述第三普尔钦斑在眼部坐标系中的坐标;确定所述第三点在屏幕坐标系中的坐标;
检测所述第四眼部图像中的普尔钦斑,作为第四普尔钦斑;并确定所述第四普尔钦斑在眼部坐标系中的坐标;确定所述第四点在屏幕坐标系中的坐标;
检测所述第五眼部图像中的普尔钦斑,作为第五普尔钦斑;并确定所述第五普尔钦斑在眼部坐标系中的坐标;确定所述第五点在屏幕坐标系中的坐标;
检测所述第六眼部图像中的普尔钦斑,作为第六普尔钦斑;并确定所述第六普尔钦斑在眼部坐标系中的坐标;确定所述第六点在屏幕坐标系中的坐标;
所述基于所述坐标和所述坐标,求解屏幕坐标系与眼部坐标系之间的转换关系,包括:
根据所述第一点、所述第二点、所述第三点、所述第四点、所述第五点和所述第六点在屏幕坐标系中的坐标、以及所述第一普尔钦斑、所述第二普尔钦斑、所述第三普尔钦斑、所述第四普尔钦斑、所述第五普尔钦斑和所述第六普尔钦斑在眼部坐标系中的坐标,求解屏幕坐标系与眼部坐标系之间的转换关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于大众问问(北京)信息科技有限公司,未经大众问问(北京)信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911358781.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种设备唤醒方法、装置及电子设备
- 下一篇:图像识别方法及图像识别装置