[发明专利]感知周围环境的方法、装置、终端和存储介质有效

专利信息
申请号: 202110105845.7 申请日: 2021-01-26
公开(公告)号: CN112927718B 公开(公告)日: 2023-05-02
发明(设计)人: 柳云飞;韩武;宋志林 申请(专利权)人: 北京字节跳动网络技术有限公司
主分类号: G10L25/48 分类号: G10L25/48;G10L25/03;G06T7/70;G06N3/045;G06V20/20;A61H3/06
代理公司: 北京天达共和律师事务所 11798 代理人: 向伟;关刚
地址: 100041 北京市石景山区*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 感知 周围环境 方法 装置 终端 存储 介质
【权利要求书】:

1.一种感知周围环境的方法,其特征在于,包括:

获取当前环境中物体的特征点相对于用户的位置,以及所述物体的特征点的材质特征;

根据目标物体的特征点相对于用户的位置、目标物体的特征点的材质特征和预设发声方式确定所述目标物体上特征点被敲击时的声音数据,其中,分别计算所述目标物体的特征点被敲击时的源声数据和回声数据,进而得到声音数据;

根据所述声音数据生成并播放所述特征点被敲击时的敲击声。

2.根据权利要求1所述的感知周围环境的方法,其特征在于,获取当前环境中物体的特征点相对于用户的位置,包括:

实时获取当前环境中物体的特征点相对于用户的位置;

或者,

预先获取当前环境中物体的特征点的位置数据,根据所述位置数据建立当前环境的三维模型;

获取用户在当前环境中的位姿信息,根据所述三维模型和所述用户的位姿信息确定所述物体的特征点相对于用户的位置。

3.根据权利要求2所述的感知周围环境的方法,其特征在于,根据目标物体的特征点相对于用户的位置、目标物体的特征点的材质特征和预设发声方式确定所述目标物体上特征点被敲击时的声音数据,包括:

根据所述三维模型、所述目标物体的特征点相对用户的位置和预设发声方式,确定所述特征点被敲击时的源声数据和回声数据;

根据所述源声数据和所述回声数据确定所述声音数据。

4.根据权利要求1所述的感知周围环境的方法,其特征在于,

在物体上每隔预设距离选取一个特征点;和/或,

在物体的边沿和顶点处选取特征点。

5.根据权利要求1所述的感知周围环境的方法,其特征在于,

采用激光雷达、摄像设备或超声设备检测所述物体的特征点相对于用户的位置,和/或,

采用摄像设备拍摄物体图像,采用深度学习算法根据所述物体图像确定物体的材质特征。

6.根据权利要求1所述的感知周围环境的方法,其特征在于,

在播放所述敲击声时对周围环境的环境音进行降噪。

7.根据权利要求1所述的感知周围环境的方法,其特征在于,还包括:

通过语音播报的方式描述周围环境。

8.根据权利要求2所述的感知周围环境的方法,其特征在于,

所述用户的位姿信息包括:用户的头部位姿。

9.一种感知周围环境的装置,包括:

获取单元,用于获取当前环境中物体的特征点相对于用户的位置,以及所述物体的特征点的材质信息;

计算单元,用于根据目标物体的特征点相对于用户的位置、目标物体的特征点的材质特征和预设发声方式确定所述目标物体上特征点被敲击时的声音数据,其中,分别计算所述目标物体的特征点被敲击时的源声数据和回声数据,进而得到声音数据;

播报单元,用于根据所述声音数据生成并播放所述特征点被敲击时的敲击声。

10.一种终端,包括:

至少一个存储器和至少一个处理器;

其中,所述至少一个存储器用于存储程序代码,所述至少一个处理器用于调用所述至少一个存储器所存储的程序代码执行权利要求1至8中任一项所述的方法。

11.一种存储介质,所述存储介质用于存储程序代码,所述程序代码用于执行权利要求1至8中任一项所述的方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110105845.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top