[发明专利]视频处理方法、视频处理装置、终端及存储介质在审
| 申请号: | 202210107934.X | 申请日: | 2022-01-28 |
| 公开(公告)号: | CN114463213A | 公开(公告)日: | 2022-05-10 |
| 发明(设计)人: | 董晓龙 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
| 主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T5/50;G06T7/73;G06V40/16 |
| 代理公司: | 北京知帆远景知识产权代理有限公司 11890 | 代理人: | 吴文婧 |
| 地址: | 523860 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 处理 方法 装置 终端 存储 介质 | ||
1.一种视频处理方法,其特征在于,所述视频包括当前帧图像,所述视频处理方法包括:
获取所述当前帧图像的人脸目标位置;
根据相机的姿态数据及所述当前帧图像的人脸目标位置获取所述当前帧图像的人脸目标位置对应的虚拟投影位置;
根据所述当前帧图像的人脸目标位置、所述虚拟投影位置、所述当前帧图像的旋转姿态项及所述当前帧图像的平移姿态项获取所述当前帧图像的目标姿态;及
根据所述当前帧图像的人脸目标位置及所述当前帧图像的目标姿态对所述当前帧图像进行渲染,以获取目标图像。
2.根据权利要求1所述的视频处理方法,其特征在于,所述视频还包括前一帧图像,所述获取所述当前帧图像的人脸目标位置,包括:
获取所述当前帧图像的人脸区域的实际中心位置;及
根据预设的人像区域防抖的目标函数和所述实际中心位置获取所述当前帧图像的人脸目标位置,所述目标函数是关于所述当前帧图像的人脸目标位置、所述前一帧图像的人脸目标位置、以及所述实际中心位置的函数。
3.根据权利要求2所述的视频处理方法,其特征在于,所述人脸区域具有多个关键点,所述当前帧图像的人脸目标位置包括多个所述关键点的目标位置;所述根据预设的人像区域防抖的目标函数和所述实际中心位置获取所述当前帧图像的人脸目标位置,包括:
获取所述当前帧图像中每个所述关键点的目标位置与所述前一帧图像中对应的关键点的目标位置之间的差值的1范数以作为第一参数;
获取所述当前帧图像中每个所述关键点的目标位置与所述实际中心位置的差值的绝对值,并从多个所述绝对值中挑选出最大值以作为第二参数;及
将所述第一参数与所述第二参数以预设第一比例进行加权和计算,以得到第一加权和值,将使所述第一加权和值取最小值时,所述当前帧图像中所有所述关键点的目标位置的取值的集合,作为所述当前帧图像的人脸目标位置。
4.根据权利要求1所述的视频处理方法,其特征在于,所述当前帧图像的人脸区域具有多个关键点,所述当前帧图像的人脸目标位置包括多个所述关键点的目标位置;所述根据相机的姿态数据及所述当前帧图像的人脸目标位置获取所述当前帧图像的人脸目标位置对应的虚拟投影位置,包括:
获取所述相机的实际姿态位置;
获取所述相机的内参矩阵、虚拟旋转矩阵及实际旋转矩阵;
根据所述实际姿态位置、所述内参矩阵、所述虚拟旋转矩阵及所述实际旋转矩阵获取单应性矩阵,所述单应性矩阵与所述相机的目标姿态位置、所述实际姿态位置相关;及
根据多个所述关键点的目标位置及所述单应性矩阵获取多个所述关键点的虚拟投影位置。
5.根据权利要求4所述的视频处理方法,其特征在于,所述根据所述实际姿态位置、所述内参矩阵、所述虚拟旋转矩阵及所述实际旋转矩阵获取单应性矩阵,包括:
获取所述内参矩阵与所述实际旋转矩阵的乘积的逆矩阵;及
根据所述虚拟旋转矩阵与所述逆矩阵的乘积、及所述实际姿态位置获取所述单应性矩阵。
6.根据权利要求1所述的视频处理方法,其特征在于,所述视频包括前一帧图像和前两帧图像,所述视频处理方法还包括:
根据所述当前帧图像的虚拟旋转姿态、所述前一帧图像的虚拟旋转姿态、所述前两帧图像的虚拟旋转姿态获取所述当前帧图像的旋转姿态项。
7.根据权利要求6所述的视频处理方法,其特征在于,所述根据所述当前帧图像的虚拟旋转姿态、所述前一帧图像的虚拟旋转姿态、所述前两帧图像的虚拟旋转姿态获取所述当前帧图像的旋转姿态项,包括:
获取所述当前帧图像的虚拟旋转姿态与所述前一帧图像的虚拟旋转姿态的差值的2范数,以作为第一旋转系数;
获取所述当前帧图像的虚拟旋转姿态与所述前一帧图像的虚拟旋转姿态的乘积、和所述前一帧图像的虚拟旋转姿态与所述前两帧图像的虚拟旋转姿态的乘积之间的差值的2范数,以作为第二旋转系数;及
将所述第一旋转系数与所述第二旋转系数以预设平滑比例进行加权和计算,以获取所述当前帧图像的旋转姿态项。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210107934.X/1.html,转载请声明来源钻瓜专利网。





