[发明专利]用于将物理环境的视觉图像集成到虚拟实境的空间关系在审
申请号: | 202111483422.5 | 申请日: | 2017-01-23 |
公开(公告)号: | CN114138118A | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 埃文·罗伯特·希尔德雷特;弗朗西斯·伯纳德·麦克杜格尔 | 申请(专利权)人: | 高通股份有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/04817;G06T19/00 |
代理公司: | 永新专利商标代理有限公司 72002 | 代理人: | 赵腾飞 |
地址: | 美国加*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 物理 环境 视觉 图像 集成 虚拟 空间 关系 | ||
1.一种供物理环境中的设备使用的方法,所述方法包括:
获得所述物理环境的深度信息,其中所述物理环境包含一或多个物理对象,且其中所述深度信息包含所述物理环境的3维,3D,点云;
通过视觉摄像机俘获所述物理环境的视觉图像;及
基于所述深度信息将所述视觉图像分段以产生包含所述一或多个物理对象的经分段图像,其中将所述视觉图像分段包含:
基于所述3D点云产生所述一或多个物理对象的3D网格;及
将所述视觉图像的与所述一或多个物理对象相对应的一部分映射到所述3D网格上。
2.根据权利要求1所述的方法,其进一步包括:
基于所述深度信息确定所述设备与包含于所述物理环境中的所述一或多个物理对象之间的空间关系。
3.根据权利要求2所述的方法,其中确定所述设备与所述一或多个物理对象之间的所述空间关系包括确定所述设备与所述一或多个物理对象之间的距离,且其中将所述视觉图像分段包括:如果所述距离小于阈值,那么在所述经分段图像中包含所述一或多个物理对象。
4.根据权利要求3所述的方法,其中所述阈值的值使得如果所述设备的用户正触碰所述一或多个物理对象,那么所述经分段图像包含所述一或多个物理对象。
5.根据权利要求3或4中任一项所述的方法,其中所述设备与所述一或多个物理对象之间的所述距离为所述设备的所述用户的手与所述一或多个物理对象之间的距离。
6.根据权利要求1所述的方法,其进一步包括:
在所述设备的显示器上显示虚拟图像;及
将所述经分段图像覆叠在所述虚拟图像上以显示所述虚拟图像及由所述视觉摄像机俘获的所述一或多个物理对象两者。
7.根据权利要求3至6中任一项所述的方法,其中将所述经分段图像覆叠在所述虚拟图像上包括基于所述设备与所述一或多个物理对象之间的所述距离调节由所述视觉摄像机俘获的所述一或多个物理对象的透明度。
8.根据权利要求7所述的方法,其中调节所述一或多个物理对象的所述透明度包括与所述设备与所述一或多个物理对象之间的所述距离的减小成比例地减小所述透明度。
9.根据权利要求1至8中任一项所述的方法,其进一步包括在一段时间内增加所述虚拟图像中的所述一或多个物理对象的所述透明度直到所述一或多个物理对象完全透明。
10.根据权利要求1至9中任一项所述的方法,其中确定所述设备与所述一或多个物理对象之间的所述空间关系包括辨识所述用户的所述手的手示意动作以识别将包含于所述经分段图像中的所述一或多个物理对象。
11.根据权利要求10所述的方法,其中所述方法进一步包括:
响应于辨识所述手示意动作而产生在所述3D点云内且接近所述用户的所述手的空间区域,其中将所述视觉图像分段包括:如果所述一或多个物理对象至少部分位于所述空间区域内,那么在所述经分段图像中包含所述一或多个物理对象,其中产生所述空间区域包括响应于辨识所述手示意动作而产生闭合3D形状,且其中将所述视觉图像分段包括:如果所述一或多个物理对象至少部分位于所述闭合3D形状内,那么在所述经分段图像中包含所述一或多个物理对象,且其中所述手示意动作为张开手示意动作,且所述闭合3D形状为球体,且可选地其中所述球体围绕所述用户的所述手而定向且具有与所述用户的所述手的手指的伸展量成比例的直径。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于高通股份有限公司,未经高通股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111483422.5/1.html,转载请声明来源钻瓜专利网。