[发明专利]基于隔空书写界面的互动方法、界面、终端及存储介质在审
申请号: | 202210273350.X | 申请日: | 2022-03-18 |
公开(公告)号: | CN114745579A | 公开(公告)日: | 2022-07-12 |
发明(设计)人: | 师超;陈长国 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | H04N21/422 | 分类号: | H04N21/422;H04N21/4223;H04N21/43;H04N21/441;H04N21/485;G06F3/04883;G06V40/20 |
代理公司: | 北京同钧律师事务所 16037 | 代理人: | 许怀远 |
地址: | 310056 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 书写 界面 互动 方法 终端 存储 介质 | ||
1.一种基于隔空书写界面的互动方法,其特征在于,所述方法应用于用户终端,所述用户终端被配置为显示设置有输入窗口的隔空书写界面,所述输入窗口的尺寸以及在所述隔空书写界面中的位置均可调,所述方法包括:
获取用户终端相关联的摄像头采集的交互图像;
识别所述交互图像中书写部件的姿态数据;
根据所述姿态数据以及输入窗口在所述隔空书写界面中的位置,确定所述隔空书写界面的显示数据,以基于所述显示数据更新所述隔空书写界面的显示画面。
2.根据权利要求1所述的方法,其特征在于,根据所述姿态数据以及输入窗口在隔空书写界面中的位置,确定所述隔空书写界面的显示数据,包括:
根据所述姿态数据,判断所述书写部件的状态是否是书写状态;
若是,则根据所述姿态数据,确定所述书写部件的书写笔尖在所述交互图像中的图像坐标;
根据所述书写笔尖的图像坐标以及所述输入窗口在所述隔空书写界面中的位置,确定所述书写笔尖在所述隔空书写界面中的显示坐标;
根据所述书写笔尖的显示坐标,确定所述隔空书写界面的显示数据。
3.根据权利要求2所述的方法,其特征在于,当所述书写部件为用户手部时,根据所述姿态数据,判断所述书写部件的状态是否是书写状态,包括:
若所述用户手部的任意两根手指的指尖的图像坐标的距离小于预设距离,或若所述用户手部与目标摄像头的距离满足预设条件,则确定所述用户手部的状态为书写状态。
4.根据权利要求2所述的方法,其特征在于,在根据所述姿态数据,判断所述书写部件的状态是否是书写状态之前,所述方法还包括:
根据所述姿态数据,判断所述书写部件是否处于交互图像的边缘区域;
若是,则根据所述书写部件在所述交互图像中的图像坐标,确定所述输入窗口的移动指令,并根据所述移动指令,更新所述输入窗口在所述隔空书写界面中的位置;
若否,则根据所述姿态数据,判断所述书写部件的状态是否是书写状态。
5.根据权利要求1所述的方法,其特征在于,所述书写部件为用户手部,在识别所述交互图像中书写部件的姿态数据之后,所述方法还包括:
若所述姿态数据中用户手部的手势为预设手势,则基于所述预设手势中各个预设关键点的位置,调整所述输入窗口的尺寸。
6.根据权利要求1-5任一项所述的方法,其特征在于,在获取用户终端的摄像头采集的交互图像之后,所述方法还包括:
对所述交互图像进行剪裁;
将剪裁后的交互图像缩放至第一尺寸,其中,所述第一尺寸为所述输入窗口的尺寸;
将缩放后的交互图像以设定透明度覆盖至所述输入窗口。
7.一种基于隔空书写界面的互动方法,其特征在于,所述方法应用于交互系统,所述交互系统包括多个用户终端,至少部分用户终端被配置为显示设置有输入窗口的隔空书写界面,所述输入窗口的尺寸以及在所述隔空书写界面中的位置均可调,所述方法包括:
获取目标用户终端相关联的目标摄像头采集的交互图像,所述目标摄像头设置于目标用户终端,所述目标用户终端为其中一个用户终端;
识别所述交互图像中书写部件的姿态数据;
根据所述姿态数据以及输入窗口在所述隔空书写界面中的位置,确定所述隔空书写界面的显示数据;
将所述显示数据发送至设置有隔空书写界面的各个用户终端,以基于所述显示数据更新用户终端显示的隔空书写界面的显示画面。
8.一种隔空书写界面,其特征在于,所述隔空书写界面上设置有输入窗口,所述输入窗口的尺寸以及在所述隔空书写界面上的位置均可调;
其中,所述隔空书写界面的显示画面为基于权利要求1-7任一项所述的方法生成的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210273350.X/1.html,转载请声明来源钻瓜专利网。