[发明专利]用于处理视频帧的方法和装置

说明书

本公开实施例公开了用于处理视频帧的方法和装置。该方法的一具体实施方式包括：获取针对目标人脸从至少两个角度分别拍摄的视频帧，其中，该至少两个角度包括主摄像头拍摄的第一角度和至少一个辅助摄像头拍摄的其它角度，所获取的视频帧中任意两个视频帧的拍摄时间之差不超过预设时长，该第一角度与正面角度之间的差值不超过预设角度。对于每一个所获取的视频帧，确定该视频帧中该目标人脸的表情的预设子表情的表情系数。基于各个所确定的表情系数，确定该目标人脸的表情的预设子表情的表情系数。本公开实施例可以对从多个角度获取的视频帧的表情系数相结合，避免从单个角度确定表情系数的数据单一的问题，从而提高了所确定的表情系数的准确度。

技术领域

本公开实施例涉及计算机技术领域，具体涉及用于处理视频帧的方法和装置。

背景技术

随着互联网技术的发展，越来越多的直播平台和短视频平台层出不穷，用户可以在这些平台上随时随地观看到视频节目。

在自拍、直播等的场景中，用户可以在画面中对自己的形象进行多种操作，从而提高画面的趣味性。例如，用户可以对脸部添加特效比如贴纸，此外，用户还可以将自己的脸部转换为动画形象。

发明内容

本公开实施例提出了用于处理视频帧的方法和装置。

第一方面，本公开实施例提供了一种用于处理视频帧的方法，该方法包括：获取针对目标人脸从至少两个角度分别拍摄的视频帧，其中，至少两个角度包括主摄像头拍摄的第一角度和至少一个辅助摄像头拍摄的其它角度，所获取的视频帧中任意两个视频帧的拍摄时间之差不超过预设时长，第一角度与正面角度之间的差值不超过预设角度；对于每一个所获取的视频帧，确定该视频帧中目标人脸的表情的预设子表情的表情系数；基于各个所确定的表情系数，确定目标人脸的表情的预设子表情的表情系数。

在一些实施例中，方法还包括：确定至少一个辅助摄像头中各个辅助摄像头相对于主摄像头的相对位姿；以及基于各个所确定的表情系数，确定目标人脸的表情的预设子表情的表情系数，包括：基于对每个辅助摄像头确定的相对位姿，确定该辅助摄像头对应的所获取的视频帧中预设子表情的表情系数的权值；通过每个辅助摄像头对应的权值，以及主摄像头对应的所获取的视频帧中预设子表情的表情系数的指定权值，确定各个所获取视频帧中预设子表情的表情系数的加权平均值，并将加权平均值作为目标人脸的表情的预设子表情的表情系数。

在一些实施例中，基于对每个辅助摄像头确定的相对位姿，确定该辅助摄像头对应的所获取的视频帧中预设子表情的表情系数的权值，包括：基于对每个辅助摄像头确定的相对位姿，确定其他角度相对于第一角度的偏移角度；确定每个辅助摄像头对应的所确定的偏移角度的余弦值，并将该余弦值作为该辅助摄像头对应的所获取的视频帧中预设子表情的表情系数的权值。

在一些实施例中，方法还包括：基于对每个辅助摄像头确定的相对位姿，对于主摄像头和至少一个辅助摄像头中的每个摄像头，确定该摄像头拍摄的视频帧中，目标人脸的位姿；对各个所确定的、目标人脸的位姿进行结合，将结合结果作为目标人脸的位姿。

在一些实施例中，对各个所确定的、目标人脸的位姿进行结合，将结合结果作为目标人脸的位姿，包括：利用最小二乘法，对各个所确定的、目标人脸的位姿进行结合，得到结合结果。

在一些实施例中，获取针对目标人脸从至少两个角度分别拍摄的视频帧，包括：对于主摄像头和至少一个辅助摄像头中的各个摄像头，响应于接收到各个摄像头拍摄的视频流，从接收到的视频流中，选取各个摄像头中每个摄像头最后拍摄的视频帧作为所获取的视频帧。

在一些实施例中，获取针对目标人脸从至少两个角度分别拍摄的视频帧，包括：对于主摄像头和至少一个辅助摄像头中的各个摄像头，响应于接收到各个摄像头拍摄的视频流，从接收到的视频流中，选取在同一个时间段内各个摄像头中每个摄像头最后拍摄的视频帧作为所获取的视频帧。