[发明专利]面部跟踪方法、设备及存储介质在审
申请号: | 202210615910.5 | 申请日: | 2022-05-31 |
公开(公告)号: | CN114898441A | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 张昱航 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/22;G06T7/73;G06T7/62;G06T7/20;G06T5/20 |
代理公司: | 北京同钧律师事务所 16037 | 代理人: | 吴梅锡;许怀远 |
地址: | 311121 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面部 跟踪 方法 设备 存储 介质 | ||
本申请提供一种面部跟踪方法、设备及存储介质,该方法包括:接收多张图像帧,多张图像帧包括目标人物面部,通过获取目标人物面部在相邻的两个图像帧的位姿数据,获取目标人物面部在相邻的两个图像帧的位姿数据变化,再根据目标人物面部在相邻的两个图像帧的位姿数据变化,调整相邻两个图像帧的后一图像帧中目标人物脸部的关键点位置,提升面部关键点的检测跟踪效果。
技术领域
本申请涉及计算机视觉领域,尤其涉及一种面部跟踪方法、设备及存储介质。
背景技术
面部检测跟踪是指在视频流或图像帧序列中检测到人物面部关键点后,在后续图像帧中继续捕获人物面部关键点的位置,广泛应用于电视电话会议、直播连麦、短视频录制、机场安防等领域。目前,现有的面部检测跟踪方案计算资源消耗过高,对设备的要求较高,检测跟踪效果欠佳。
发明内容
本申请实施例提供一种面部跟踪方法、设备及存储介质,提升面部关键点的检测跟踪效果。
本申请实施例的第一方面提供一种面部跟踪方法,包括:
接收多张图像帧,所述多张图像帧包括目标人物面部;
获取所述目标人物面部在第一图像帧相对于第二图像帧的位姿数据变化;所述第一图像帧为所述多张图像帧中除第一帧外的任一图像帧,所述第二图像帧为所述第一图像帧的上一图像帧;
根据所述位姿数据变化,调整所述第一图像帧中所述目标人物面部的关键点位置。
本申请第一方面的一个可选实施例中,所述目标人物面部的所述位姿数据变化包括三维姿态数据变化;所述获取目标人物面部在第一图像帧相对于第二图像帧的位姿数据变化,包括:
获取所述目标人物面部在所述第一图像帧以及所述第二图像帧的三维姿态数据;
根据所述目标人物面部在所述第一图像帧以及所述第二图像帧的三维姿态数据,确定所述三维姿态数据变化。
本申请第一方面的一个可选实施例中,所述获取所述目标人物面部在所述第一图像帧以及所述第二图像帧的三维姿态数据,包括:
获取所述目标人物面部在所述第一图像帧的第一关键点检测数据,根据所述第一关键点检测数据确定所述目标人物面部在所述第一图像帧的三维姿态数据;
获取所述目标人物面部在所述第二图像帧的第二关键点检测数据,根据所述第二关键点检测数据确定所述目标人物面部在所述第二图像帧的三维位姿数据。
本申请第一方面的一个可选实施例中,所述方法还包括:
获取所述目标人物面部在所述第一图像帧的面积占比;
根据所述目标人物面部在所述第一图像帧的面积占比,确定第一参数;
所述第一参数用于调整所述位姿数据变化,所述第一参数与所述目标人物面部在所述第一图像帧的面积占比负相关。
本申请第一方面的一个可选实施例中,所述获取目标人物面部在第一图像帧相对于第二图像帧的位姿数据变化,包括:
通过所述第一参数调整所述目标人物面部在第一图像帧相对于第二图像帧的位姿数据变化,获取调整后的位姿数据变化;
所述根据所述位姿数据变化,调整所述第一图像帧中所述目标人物面部的关键点位置,包括:根据调整后的位姿数据变化,调整所述第一图像帧中所述目标人物面部的关键点位置。
本申请第一方面的一个可选实施例中,所述根据所述位姿数据变化,调整所述第一图像帧中所述目标人物面部的关键点位置,包括:
若所述目标人物面部在至少两个维度的姿态数据变化小于阈值,通过第一滤波器调整所述第一图像帧中所述目标人物面部的关键点位置;或者
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210615910.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:页面资源预取方法、装置、介质及电子设备
- 下一篇:一种迷你玩具水稻的培育方法