[发明专利]一种增强现实AR特效控制方法、装置及设备在审
| 申请号: | 202010519544.4 | 申请日: | 2020-06-09 |
| 公开(公告)号: | CN111640197A | 公开(公告)日: | 2020-09-08 |
| 发明(设计)人: | 王子彬;孙红亮;李炳泽 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
| 主分类号: | G06T19/00 | 分类号: | G06T19/00;G06F3/01;G06K9/00 |
| 代理公司: | 北京中知法苑知识产权代理有限公司 11226 | 代理人: | 李明;赵吉阳 |
| 地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 增强 现实 ar 特效 控制 方法 装置 设备 | ||
1.一种增强现实AR特效控制方法,其特征在于,包括:
获取设定游乐场所内的包含目标用户的现实场景图像;
基于所述现实场景图像,确定所述目标用户的第一动作对应的第一动作标签;
基于所述第一动作标签,确定虚拟对象的AR展示特效;其中,在所述AR展示特效中所述虚拟对象进行第二动作,所述虚拟对象的所述第二动作用于回应所述目标用户的所述第一动作;
基于所述虚拟对象的AR展示特效和所述现实场景图像,生成AR场景画面,并控制AR设备展示所述AR场景画面。
2.根据权利要求1所述的方法,其特征在于,基于所述第一动作标签,确定虚拟对象的AR展示特效,包括:
确定与所述第一动作标签匹配的第二动作标签;
基于确定的所述第二动作标签,确定所述虚拟对象的所述AR展示特效。
3.根据权利要求1或2所述的方法,其特征在于,确定所述第一动作标签,包括:
基于动作识别模型,对所述现实场景图像进行动作识别,确定所述第一动作标签;
其中,所述动作识别模型是根据多个动作图像样本数据训练得到的;每个动作图像样本数据包括:包含人体的图像样本以及该图像样本对应的动作标签。
4.根据权利要求1或2所述的方法,其特征在于,所述现实场景图像的数量为多个;确定所述第一动作标签,包括:
基于肢体识别模型,对每个现实场景图像进行骨骼特征点识别,确定所述目标用户的多个骨骼特征点在每个现实场景图像中的位置;其中,所述肢体识别模型是根据多个肢体图像样本数据训练得到的,每个肢体图像样本数据包括:包含人体的图形样本以及该图像样本中多个骨骼特征点的位置;
根据所述目标用户的多个骨骼特征点在每相邻两个现实场景图像中的位置,确定所述目标用户的姿态变化信息;
根据所述目标用户的姿态变化信息确定所述第一动作;
确定所述第一动作对应的第一动作标签。
5.根据权利要求1至4任一项所述的方法,其特征在于,在基于所述第一动作标签,确定虚拟对象的AR展示特效之前,所述方法还包括:
根据以下任意一项或任意组合,确定所述虚拟对象:
所述第一动作标签、所述目标用户的身份信息、所述设定游乐场所的场景信息、所述目标用户的位置信息,所述AR设备当前显示或即将显示的目标图像。
6.根据权利要求1至5任一项所述的方法,其特征在于,获取设定游乐场所内的包含目标用户的现实场景图像之前,所述方法还包括:
检测到所述目标用户进入所述设定游乐场所。
7.一种增强现实AR特效控制装置,其特征在于,包括:
获取单元,用于获取设定游乐场所内的包含目标用户的现实场景图像;
处理单元,用于基于所述现实场景图像,确定所述目标用户的第一动作对应的第一动作标签;基于所述第一动作标签,确定虚拟对象的AR展示特效;其中,在所述AR展示特效中所述虚拟对象进行第二动作,所述虚拟对象的所述第二动作用于回应所述目标用户的所述第一动作;以及基于所述虚拟对象的AR展示特效和所述现实场景图像,生成AR场景画面;
控制单元,控制AR设备展示所述AR场景画面。
8.一种增强现实AR特效控制设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至6任一所述的方法的步骤。
9.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至6任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010519544.4/1.html,转载请声明来源钻瓜专利网。





