[发明专利]一种提示信息展示方法、装置、设备及存储介质在审

专利信息
申请号: 202011546917.3 申请日: 2020-12-24
公开(公告)号: CN112598805A 公开(公告)日: 2021-04-02
发明(设计)人: 李宇飞;张建博 申请(专利权)人: 浙江商汤科技开发有限公司
主分类号: G06T19/00 分类号: G06T19/00;G06T7/11;G06T7/73;G06K9/62
代理公司: 北京中知恒瑞知识产权代理事务所(普通合伙) 11889 代理人: 吴迪
地址: 311215 浙江省杭州市萧*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 提示 信息 展示 方法 装置 设备 存储 介质
【说明书】:

本公开提供了一种提示信息展示方法、装置、设备及存储介质,包括:获取AR设备拍摄的目标场景的实景图像;基于所述实景图像和预先建立的所述目标场景的三维场景模型,确定所述AR设备的位姿信息;其中,所述三维场景模型中标注有危险区域信息,所述危险区域信息通过预训练的语义分割模型进行识别;在检测到所述AR设备满足所述危险区域对应的危险提示信息的展示条件的情况下,输出提示信息以对用户进行提示。

技术领域

本公开涉及增强现实(Augmented Reality,AR)技术领域,具体而言,涉及一种提示信息展示方法、装置、设备及存储介质。

背景技术

随着AR技术的发展,AR技术已经逐渐应用到各行各业中。一般的,用户在观看AR展示画面时,用户所关注的内容在于AR展示画面中的虚拟物,沉浸感较强;然而这种方法容易导致用户在移动过程中,仅仅关注AR画面中的虚拟物而忽略当前所处的环境,进而导致危险事件的发生。

例如,若位置点A处放置了一虚拟物,用户位于位置点B,从位置点B到位置点A之间存在台阶,用户在基于AR设备观看到位置点A的虚拟物之后,在向位置点A的移动过程中,可能会忽略现实场景中的台阶,进而发生跌倒等事故。

发明内容

本公开实施例至少提供一种提示信息展示方法、装置、设备及存储介质。

第一方面,本公开实施例提供了一种提示信息展示方法,包括:

获取AR设备拍摄的目标场景的实景图像;

基于所述实景图像和预先建立的所述目标场景的三维场景模型,确定所述AR设备的位姿信息;其中,所述三维场景模型中标注有危险区域信息,所述危险区域信息通过预训练的语义分割模型进行识别;

在检测到所述AR设备满足所述危险区域对应的危险提示信息的展示条件的情况下,输出提示信息以对用户进行提示。基于上述方法,可以基于语义分割模型在三维场景模型中标注危险区域信息,并在危险区域添加对应的危险提示信息,

这样,在检测到AR设备满足危险区域对应的危险提示信息的展示条件的情况下,可以输出提示信息对用户进行提示,一方面,基于语义分割模型为三维场景模型添加危险区域标注,可以实现对于三维场景模型中危险区域的自动识别,基于添加了危险区域标注的三维场景模型,可以准确检测用户是否位于危险区域;另一方面,通过AR设备输出提示信息,丰富了提示信息的展示方式,也降低了用户在观看AR画面的过程中发生危险的概率,提升了用户观看AR画面时的安全性。

一种可能的实施方式中,基于以下方法检测所述AR设备是否满足所述危险区域对应的危险提示信息的展示条件:

基于所述实景图像中的特征点,查找所述三维场景模型中与所述特征点对应的匹配特征点;

若查找到的所述匹配特征点标注有所述危险区域信息,则确定所述AR设备满足所述危险区域对应的危险提示信息的展示条件。

若与实景图像中的特征点对应的匹配特征点标注有危险区域信息,则说明AR设备当前的位置距离危险区域较近,确定AR设备满足危险区域对应的危险提示信息的展示条件,可以在用户到达危险区域之前为用户展示危险提示信息,提高了AR画面展示过程中用户的安全性。

一种可能的实施方式中,基于以下方法检测所述AR设备是否满足所述危险区域对应的危险提示信息的展示条件:

当基于所述AR设备的位姿信息,确定所述AR设备与所述危险区域信息指示的危险区域之间的相对位姿关系满足预设条件的情况下,确定所述AR设备满足所述危险区域对应的危险提示信息的展示条件。

一种可能的实施方式中,根据以下方法建立标注有危险区域信息所述三维场景模型:

获取所述目标场景对应的全景图像,并基于所述全景图像,建立三维场景模型;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江商汤科技开发有限公司,未经浙江商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011546917.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top