[发明专利]虚拟对象处理方法及装置、存储介质和电子设备有效
申请号: | 201910695983.8 | 申请日: | 2019-07-30 |
公开(公告)号: | CN110473293B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 康健 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00 |
代理公司: | 深圳市联鼎知识产权代理有限公司 44232 | 代理人: | 刘抗美 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 对象 处理 方法 装置 存储 介质 电子设备 | ||
1.一种虚拟对象处理方法,其特征在于,包括:
确定第一设备所处场景的特征点云,并利用所述特征点云检测所述第一设备所处场景中的空间平面;
对所述场景中真实对象进行检测,以确定多个真实对象位置框;
针对所述多个真实对象位置框中的任意一个真实对象位置框,确定所述真实对象位置框的多个特征位置点;确定所述多个特征位置点在所述特征点云的坐标系下的坐标点以及法线方向;针对所述多个特征位置点在所述特征点云的坐标系下的坐标点,如果沿所述法线方向的投影均在同一空间平面上,则确定所述真实对象位置框为候选位置框,并将所述真实对象位置框添加至候选位置框集合;
响应针对所述候选位置框集合中一目标位置框的虚拟对象配置操作,确定虚拟对象在所述目标位置框中的位置信息;
将所述虚拟对象的信息以及所述虚拟对象在所述目标位置框中的位置信息发送给第二设备,以便在所述第二设备上显示所述虚拟对象。
2.根据权利要求1所述的虚拟对象处理方法,其特征在于,确定第一设备所处场景的特征点云包括:
根据所述第一设备采集的多个视频帧图像以及对应的惯性信息提取所述场景的特征点;
基于提取到的特征点构建特征点云。
3.根据权利要求2所述的虚拟对象处理方法,其特征在于,对所述场景中真实对象进行检测,以确定多个真实对象位置框包括:
确定一目标帧图像,将所述目标帧图像输入训练后的机器学习模型中,利用所述训练后的机器学习模型确定多个真实对象位置框。
4.根据权利要求1至3中任一项所述的虚拟对象处理方法,其特征在于,在确定虚拟对象在所述目标位置框中的位置信息后,所述虚拟对象处理方法还包括:
基于所述虚拟对象在所述目标位置框中的位置信息,确定所述虚拟对象在所述场景中的三维位置信息;
根据所述虚拟对象在所述场景中的三维位置信息在所述第一设备上显示所述虚拟对象。
5.一种虚拟对象处理方法,其特征在于,包括:
确定第二设备所处场景的特征点云,并利用所述特征点云检测第二设备所处场景中的空间平面;
对所述场景中真实对象进行检测,以确定多个真实对象位置框;
针对所述多个真实对象位置框中的任意一个真实对象位置框,确定所述真实对象位置框的多个特征位置点;确定所述多个特征位置点在所述特征点云的坐标系下的坐标点以及法线方向;针对所述多个特征位置点在所述特征点云的坐标系下的坐标点,如果沿所述法线方向的投影均在同一空间平面上,则确定所述真实对象位置框为候选位置框,并将所述真实对象位置框添加至候选位置框集合;
获取由第一设备发送的虚拟对象的信息以及所述虚拟对象在所述第一设备的目标位置框中的位置信息;
响应一虚拟对象配置操作,从所述候选位置框集合中确定虚拟对象放置框;
基于所述虚拟对象在所述第一设备的目标位置框中的位置信息,确定所述虚拟对象在所述虚拟对象放置框中的位置信息,以便在所述第二设备上显示所述虚拟对象。
6.根据权利要求5所述的虚拟对象处理方法,其特征在于,确定第二设备所处场景的特征点云包括:
根据所述第二设备采集的多个视频帧图像以及对应的惯性信息提取所述场景的特征点;
基于提取到的特征点构建特征点云。
7.根据权利要求6所述的虚拟对象处理方法,其特征在于,对所述场景中真实对象进行检测,以确定多个真实对象位置框包括:
确定一目标帧图像,将所述目标帧图像输入训练后的机器学习模型中,利用所述训练后的机器学习模型确定多个真实对象位置框。
8.根据权利要求5至7中任一项所述的虚拟对象处理方法,其特征在于,基于所述虚拟对象在所述第一设备的目标位置框中的位置信息,确定所述虚拟对象在所述虚拟对象放置框中的位置信息包括:
确定所述目标位置框与所述虚拟对象位置框的尺寸比例:
按所述尺寸比例对所述虚拟对象在所述第一设备的目标位置框中的位置信息进行缩放处理,并将缩放处理的结果确定为所述虚拟对象在所述虚拟对象放置框中的位置信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910695983.8/1.html,转载请声明来源钻瓜专利网。