[发明专利]一种多人虚拟直播方法、装置、电子设备及存储介质有效
申请号: | 201910765435.8 | 申请日: | 2019-08-19 |
公开(公告)号: | CN110636315B | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 马里千;郑文;张国鑫;张博宁;刘晓强;黄旭为 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | H04N21/2187 | 分类号: | H04N21/2187;H04N21/234;H04N21/258;H04N21/44;H04N21/442;G06K9/00 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 李娜 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 直播 方法 装置 电子设备 存储 介质 | ||
1.一种多人虚拟直播方法,其特征在于,所述方法包括:
识别视频流中当前帧图像中的所有第一个体部件信息,所述第一个体部件信息包括:第一面部信息、第一肢体信息和第一手部信息;
获取上一帧图像中已识别的所有第一个体身份信息,所述第一个体身份信息用于标识所述上一帧图像中属于相同个体的第二个体部件信息,所述第二个体部件信息包括:第二面部信息、第二肢体信息和第二手部信息;
对所述当前帧图像中的每一个第一个体部件信息分别与所述第一个体身份信息中对应的第二个体部件信息进行匹配,识别所述当前帧图像中的各第一个体部件信息所属的第二个体身份信息;
根据所述第二个体身份信息对应的个体的姿态变化,驱动所述第二个体身份信息对应的虚拟形象的姿态变化。
2.根据权利要求1所述的方法,其特征在于,所述第一手部信息包括:第一左手部信息和第一右手部信息,所述对所述当前帧图像中的每一个第一个体部件信息分别与所述第一个体身份信息中对应的第二个体部件信息进行匹配,识别所述当前帧图像中的各第一个体部件信息所属的第二个体身份信息的步骤,包括:
计算所述当前帧图像中的每一个第一面部信息与所述上一帧图像中的每一个第二面部信息的第一匹配度;
计算所述当前帧图像中的每一个第一肢体信息与所述当前帧图像的每一个第一面部信息的第二匹配度;
计算所述当前帧图像中的每一个第一左手部信息与所述当前帧图像中的每一个第一肢体信息的第三匹配度;
计算所述当前帧图像中的每一个第一右手部信息与所述当前帧图像中的每一个第一肢体信息的第四匹配度;
根据所述第一匹配度、所述第二匹配度、所述第三匹配度、所述第四匹配度,以及所述上一帧图像中所述第一个体身份信息包含的第二个体部件信息,识别所述当前帧图像中的各第一个体部件信息所属的第二个体身份信息。
3.根据权利要求2所述的方法,其特征在于,根据所述第一匹配度、所述第二匹配度、所述第三匹配度、所述第四匹配度,以及所述上一帧图像中所述第一个体身份信息包含的第二个体部件信息,识别所述当前帧图像中的各第一个体部件信息所属的第二个体身份信息,包括:
在上一帧图像中确定第二目标面部信息,将所述第二目标面部信息的第一目标个体身份信息作为第一目标面部信息的第二目标个体身份信息,其中,所述第二目标面部信息与所述第一目标面部信息的第一匹配度符合第一预设匹配度;
根据所述当前帧图像中各第一肢体信息与所述第一目标面部信息的第二匹配度,确定第一目标肢体信息;
根据所述当前帧图像中各第一左手部信息与所述第一目标肢体信息的第三匹配度,确定第一目标左手部信息;
根据所述当前帧图像中各第一右手部信息与所述第一目标肢体信息的第四匹配度,确定第一目标右手部信息;
将所述第一目标面部信息、所述第一目标肢体信息、所述第一目标左手部信息和所述第一目标右手部信息标识为所述第二目标个体身份信息。
4.根据权利要求2所述的方法,其特征在于,根据所述第一匹配度、所述第二匹配度、所述第三匹配度、所述第四匹配度,以及所述上一帧图像中所述第一个体身份信息包含的第二个体部件信息,识别所述当前帧图像中的各第一个体部件信息所属的第二个体身份信息,包括:
在所述当前帧图像中确定新面部信息,其中,所述新面部信息与所述上一帧图像中的所有第二面部信息的第一匹配度均不符合第一预设匹配度;
根据所述当前帧图像中各第一肢体信息与所述新面部信息的第二匹配度,确定新肢体信息;
根据所述当前帧图像中各第一左手部信息与所述新肢体信息的第三匹配度,确定新左手部信息;
根据所述当前帧图像中各第一右手部信息与所述新肢体信息的第四匹配度,确定新右手部信息;
将所述新面部信息、所述新肢体信息、所述新左手部信息和所述新右手部信息,标识为新第二个体身份信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910765435.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:改进的边界分割
- 下一篇:基于轨道交通网的乘客信息系统