[发明专利]手部动作捕捉方法、装置、电子设备及存储介质有效
申请号: | 202011376590.X | 申请日: | 2020-11-30 |
公开(公告)号: | CN112416133B | 公开(公告)日: | 2021-10-15 |
发明(设计)人: | 柴金祥;其他发明人请求不公开姓名 | 申请(专利权)人: | 魔珐(上海)信息科技有限公司;上海墨舞科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06T19/00 |
代理公司: | 北京林达刘知识产权代理事务所(普通合伙) 11277 | 代理人: | 刘新宇 |
地址: | 201803 上海市嘉*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 捕捉 方法 装置 电子设备 存储 介质 | ||
1.一种手部动作捕捉方法,其特征在于,包括:
确定附着在手部的第一标记对象的空间位置以及第一标记对象位于所述手部的部位的标签信息;利用第一标记对象的所述空间位置以及所述标签信息对初始手部姿态模型进行调整,生成与所述手部对应的基准手部姿态模型;
所述初始手部姿态模型包括用于描述手部形状的形状参数以及用于描述手部动作的手部动作参数;
所述利用第一标记对象的所述空间位置以及所述标签信息对初始手部姿态模型进行调整,生成与所述手部对应的基准手部姿态模型包括:
通过使所述手部做出特定手部动作,设置所述初始手部姿态模型中的手部动作参数;
在所述手部动作参数确定的情况下,获取第一标记对象在所述手部做出所述特定手部动作的情况下的所述空间位置以及所述标签信息;
利用所述手部动作参数、所述空间位置以及所述标签信息,对所述初始手部姿态模型的形状参数进行调整,生成与所述手部对应的所述基准手部姿态模型;
确定第一标记对象在所述手部的分布情况;
在预先设置的手部动作库中选择满足所述分布情况的至少一个手部动作;
在确定所述至少一个手部动作不存在有歧义的手部动作的情况下,利用所述至少一个手部动作确定为先验手部动作;
利用所述先验手部动作建立所述先验手部动作模型;
响应于所述手部所做出的当前手部动作,获取第一标记对象的当前空间位置以及当前标签信息;
利用所述当前空间位置、所述当前标签信息以及与先验手部动作对应的先验手部动作模型对所述基准手部姿态模型进行调整,获取所述手部的当前手部姿态模型,以用于捕捉所述手部的当前手部动作。
2.如权利要求1所述的方法,其特征在于,获取第一标记对象的当前标签信息包括:
获取所述当前标签信息的预测空间位置和所述第一标记对象的当前空间位置;
在确定所述第一标记对象的当前空间位置处于所述当前标签信息的预测空间位置的预设范围内的情况下,将所述第一标记对象与所述当前标签信息进行匹配,获得匹配关系,其中,所述预设范围是根据对所述手部的手部动作轨迹预测所设定的范围;
根据所述匹配关系,确定所述第一标记对象对应的所述当前标签信息。
3.如权利要求1所述的方法,其特征在于,所述利用所述当前空间位置、所述当前标签信息以及与先验手部动作对应的先验手部动作模型对所述基准手部姿态模型进行调整,获取所述手部的当前手部姿态模型,以用于捕捉所述手部的当前手部动作包括:
在所述基准手部姿态模型的形状参数确定的情况下,通过在所述先验手部动作模型的约束下通过不断调整所述手部动作参数使所有所述标签信息的虚拟空间位置与所有所述标签信息对应的所述第一标记对象的空间位置距离之和最小,获取所述当前手部姿态模型,以用于捕捉所述手部的姿态。
4.如权利要求1至3中的任一权利要求所述的方法,其特征在于,还包括:
确定与所述手部执行互动的互动道具;
通过在所述互动道具上附着的道具标记对象,获取所述互动道具的道具空间位置及道具标签信息;
利用所述道具空间位置以及道具标签信息,对与所述互动道具对应的基本道具姿态模型进行调整,生成当前道具姿态模型,以用于捕捉所述互动道具的运动。
5.如权利要求4所述的方法,其特征在于,所述通过在所述互动道具上附着的道具标记对象,获取所述互动道具的道具空间位置及道具标签信息包括:
从所述道具标记对象中按照预设选择方式选择第一道具标记对象;
获取第一道具标记对象的空间位置并将第一道具标记对象的空间位置确定为所述道具空间位置;
获取第一道具标记对象的道具标签信息并将第一道具标记对象的道具标签信息确定为所述道具标签信息。
6.如权利要求1所述的方法,其特征在于,所述空间位置包括第一标记对象在用于捕捉所述手部的捕捉空间对应的空间坐标系内的坐标数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于魔珐(上海)信息科技有限公司;上海墨舞科技有限公司,未经魔珐(上海)信息科技有限公司;上海墨舞科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011376590.X/1.html,转载请声明来源钻瓜专利网。