[发明专利]与乘员交互的方法及装置、车辆、电子设备和存储介质有效
| 申请号: | 202110603371.9 | 申请日: | 2021-05-31 |
| 公开(公告)号: | CN113361361B | 公开(公告)日: | 2023-04-07 |
| 发明(设计)人: | 卫承;吴阳平;许亮;相硕琦 | 申请(专利权)人: | 上海商汤临港智能科技有限公司 |
| 主分类号: | G06V40/20 | 分类号: | G06V40/20;B60W50/08 |
| 代理公司: | 北京林达刘知识产权代理事务所(普通合伙) 11277 | 代理人: | 刘新宇 |
| 地址: | 200232 上海市自由贸易试验区临港*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 乘员 交互 方法 装置 车辆 电子设备 存储 介质 | ||
1.一种与乘员交互的方法,其特征在于,包括:
获取车舱内的影像信息;
响应于交互请求,基于所述影像信息,检测所述车舱内的乘员的头部回转动作,其中,一次头部回转动作包括向两个相反方向转头的动作;
基于所述头部回转动作,确定所述乘员的头部动作检测结果;
基于所述头部动作检测结果,确定所述交互请求对应的响应信息;
其中,所述响应于交互请求,基于所述影像信息,检测所述车舱内的乘员的头部回转动作,包括:
响应于交互请求,基于所述影像信息,获得所述车舱内的乘员的头部姿态数据,其中,所述头部姿态数据包括所述乘员在一段时间内的多个时刻的头部姿态角;
在根据多个时刻的头部姿态角确定所述乘员的头部在第一时间段内持续向所述第一方向转动,且所述第一时间段内的任一时刻的头部姿态角与所述第二方向对应的第二姿态角阈值之间的差值的绝对值大于或等于第二预设阈值的情况下,确定检测到所述乘员向所述第一方向转头的动作;和/或,在根据多个时刻的头部姿态角确定所述乘员的头部在第二时间段内持续向所述第二方向转动,且所述第二时间段内的任一时刻的头部姿态角与所述第一方向对应的第一姿态角阈值之间的差值的绝对值大于或等于第三预设阈值的情况下,确定检测到所述乘员向所述第二方向转头的动作;其中,所述第一姿态角阈值、所述第二姿态角阈值、所述第二预设阈值和所述第三预设阈值中的至少之一根据所述乘员的头部姿态角动态更新;
响应于在检测到所述乘员向第一方向转头的动作之后的第二预设时长内,检测到所述乘员向与所述第一方向相反的第二方向转头的动作,确定检测到所述第一方向和/或所述第二方向对应的预设方向的头部回转动作。
2.根据权利要求1所述的方法,其特征在于,所述基于所述头部回转动作,确定所述乘员的头部动作检测结果,包括:
响应于检测到第一预设时长内预设方向的头部回转动作的次数大于或等于第一预设阈值,确定所述头部动作检测结果包括所述预设方向的头部回转动作对应的预设头部动作,其中,所述第一预设时长大于所述第二预设时长。
3.根据权利要求2所述的方法,其特征在于,
所述预设方向的头部回转动作包括垂直方向的头部回转动作,一次垂直方向的头部回转动作包括向上抬头的动作和向下低头的动作,所述垂直方向的头部回转动作对应的预设头部动作包括点头;
和/或,
所述预设方向的头部回转动作包括水平方向的头部回转动作,一次水平方向的头部回转动作包括向右转头的动作和向左转头的动作,所述水平方向的头部回转动作对应的预设头部动作包括摇头。
4.根据权利要求1至3中任意一项所述的方法,其特征在于,所述方法还包括:
在根据多个时刻的头部姿态角确定所述乘员的头部在所述第一时间段内持续向所述第一方向转动,且所述第一时间段内的第一时刻的头部姿态角与所述第二姿态角阈值之间的差值的绝对值大于或等于所述第二预设阈值的情况下,将所述第二姿态角阈值更新为所述第一时刻的头部姿态角;以及,在所述第一时间段内的第二时刻的头部姿态角对应的头部姿态比所述第一姿态角阈值对应的头部姿态更倾向于所述第一方向的情况下,将所述第一姿态角阈值更新为所述第二时刻的头部姿态角;其中,所述第一时刻和所述第二时刻为所述第一时间段内的任意时刻;
和/或,
在根据多个时刻的头部姿态角确定所述乘员的头部在所述第二时间段内持续向所述第二方向转动,且所述第二时间段内的第三时刻的头部姿态角与所述第一姿态角阈值之间的差值的绝对值大于或等于所述第三预设阈值的情况下,将所述第一姿态角阈值更新为所述第三时刻的头部姿态角;以及,在所述第二时间段内的第四时刻的头部姿态角对应的头部姿态比所述第二姿态角阈值对应的头部姿态更倾向于所述第二方向的情况下,将所述第二姿态角阈值更新为所述第四时刻的头部姿态角;其中,所述第三时刻和所述第四时刻为所述第二时间段内的任意时刻。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤临港智能科技有限公司,未经上海商汤临港智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110603371.9/1.html,转载请声明来源钻瓜专利网。





