[发明专利]一种MR/AR/VR购物和检索场景控制方法、移动终端与可读存储介质在审
| 申请号: | 202111460735.9 | 申请日: | 2021-12-02 |
| 公开(公告)号: | CN114119171A | 公开(公告)日: | 2022-03-01 |
| 发明(设计)人: | 王雪燕;黄正宗;王亮;陈霖;张玉江;蔡雍稚 | 申请(专利权)人: | 浙江科顿科技有限公司 |
| 主分类号: | G06Q30/06 | 分类号: | G06Q30/06;G06F3/01;G06T17/00;G06V20/20 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 317000 浙江省*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 mr ar vr 购物 检索 场景 控制 方法 移动 终端 可读 存储 介质 | ||
1.一种MR/AR/VR购物场景控制方法,其特征在于包括如下步骤:
S1.通过在智能眼镜上的界面切换或选择进入购物场景的增强现实界面;
S2.通过智能眼镜的感知模块获取视野内的图像,通过算法对图像进行识别,识别相应的物品种类;
S3.在网络数据库和内置数据库中搜索物品种类所关联的信息,通过智能眼镜的成像装置进行关联信息的成像。
2.根据权利要求1所述的控制方法,其特征在于所述的关联信息建模步骤如下:
S4.通过PC端口、移动端口、智能眼镜端口建立物品的三维模型,包括但不限于物品的三维结构、物理特性等;
S5.通过端口设置启用该三维模型的特征图像信息,同时设置操作该三维模型的特定手势信息。
3.根据权利要求2所述的控制方法,其特征在于所述的三维模型控制步骤如下:
S6.通过智能眼镜的感知模块获取视野内的图像,通过算法对图像进行识别,识别相应的物品;
S7.通过智能眼镜的成像装置对相应的物品进行三维模型的呈现,通过智能眼镜的感知模块获取视野内的图像,识别图像中是否有特征图像信息或特定手势信息,若有特征图像信息,根据特征图像信息,三维模型根据所设置的物理特性完成尺寸和状态的调整,将调整后的三维模型通过成像装置叠加至特征图像上进行关键适配点的匹配和贴合完成三维模型的使用;若有特定手势信息,根据预先设置的特定手势完成三维模型尺寸、外形、颜色及显示位置的调整。
4.根据权利要求1所述的控制方法,其特征在于所述的S3中所述的通过智能眼镜的成像装置进行关联信息的成像前对相关信息进行筛选,筛选步骤如下:
S8.通过后置摄像头对眼球信息进行捕捉,获取当下时刻眼球的光学焦点,将该焦点投射至感知模块所获取到的图像上,确定焦点是否在识别出的物体范围内;
S9.若焦点在识别出的某一物体范围内,且焦点停留时间超过设定阈值,通过成像装置对该物体的关联信息进行显示,否则不显示相关物体的关联信息。
5.根据权利要求1所述的控制方法,其特征在于所述的关联信息的成像选择包括如下步骤:通过感知模块所获取的图像信息完成识别物品在真实世界中是三维物体还是二维物体的识别,若识别物品为三维物体则进行物品信息的成像,若识别物品为二维物体则进行三维模型的成像。
6.根据权利要求1所述的控制方法,其特征在于所述的关联信息的成像选择包括如下步骤:通过感知模块所获取的图像信息完成物品识别,若所识别的物品被系统标注为不可接触使用的物品或被系统标注为内部构造需被观看的物品,则优先进行三维模型的成像。
7.一种MR/AR/VR检索场景控制方法,其特征在于包括如下步骤:
S10.通过在智能眼镜上的界面切换或选择进入检索场景的增强现实界面;
S11.通过智能眼镜的感知模块获取视野内的图像,通过算法对图像进行识别,识别图像中的特征点并完成特征对象的锁定,通过通信模块将该特征对象数据上传至服务器;
S12.将服务器中网络数据库和内置数据库存储的特征对象所关联的信息通过通信模块回传至智能眼镜,通过智能眼镜的成像装置进行关联信息的成像。
8.根据权利要求7所述的控制方法,其特征在于所述的关联信息包括其他用户对特征对象所上传的文字数据、语音数据、图像数据,其他端口对特征对象所上传的文字数据、语音数据、图像数据。
9.一种移动终端,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的控制方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的控制方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江科顿科技有限公司,未经浙江科顿科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111460735.9/1.html,转载请声明来源钻瓜专利网。





