[发明专利]基于帧相似性和视觉质量以及兴趣的帧编码选择

权利要求书

1.一种视频编码方法，包括：当编码帧速率下降至低于预定阈值时：

缓冲由摄像机生成的多个输入视频帧，

基于帧质量度量向每个缓冲的输入帧分配权重，其中，所述帧质量度量是根据在捕获每个缓冲的输入帧期间出现的摄像机自动曝光设置的变化率而得到的，

编码最高加权的帧，以及

从缓冲器中丢弃多个较低加权的帧而不编码。

2.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据每个缓冲的输入帧与其前一帧之间的曝光变化而得到的。

3.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据每个缓冲的输入帧的估计亮度而得到的。

4.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据对每个缓冲的输入帧执行的估计面部检测而得到的。

5.根据权利要求4所述的视频编码方法，其中，所述帧质量度量进一步是根据每个输入帧内检测到的面部区域的估计亮度而得到的。

6.根据权利要求4所述的视频编码方法，其中，所述帧质量度量进一步是根据每个输入帧内检测到的面部的人为现象而得到的。

7.根据权利要求4所述的视频编码方法，其中，所述帧质量度量进一步是根据每个输入帧内检测到的面部的位置而得到的。

8.根据权利要求4所述的视频编码方法，其中，所述帧质量度量进一步是根据与每个输入帧内检测到的面部相关联的置信度分数而得到的。

9.根据权利要求6所述的视频编码方法，其中，所述人为现象是检测到的微笑。

10.根据权利要求6所述的视频编码方法，其中，所述人为现象是检测到睁眼。

11.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据每个缓冲的输入帧内的空间复杂性的估计而得到的。

12.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据每个缓冲的输入帧的运动的估计而得到的。

13.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据与每个输入帧相关联的抖动的估计而得到的。

14.根据权利要求1所述的视频编码方法，其中，所述帧质量度量进一步是根据每个输入帧与至少一个先前编码帧之间的时间一致性的估计而得到的。

15.根据权利要求1所述的视频编码方法，其中，所述编码包括针对要编码的帧的每个像素块执行以下操作：

在要编码的帧的相应像素块与多个本地存储的参考帧之间执行运动估计搜索，

针对由所述搜索识别的每个候选参考帧，确定要编码的相应像素块与来自相应候选参考帧的匹配像素块之间的相似性测度，

根据候选参考帧的时间位置定标该相似性测度，

基于经定标的相似性测度选择一匹配像素块作为要编码的像素块的预测参考，以及

参照该预测参考来编码输入的该像素块。

16.一种视频编码装置，包括：

摄像机，

视频编码器系统，包括：

缓冲器，用于存储来自摄像机的视频序列的输入帧，

编码引擎，用于根据时间预测技术编码来自缓冲器的所选择的帧，

参考图片缓存，用于存储经编码的参考帧的重建视频数据，以及

控制器，用于控制视频编码序列的操作，其中，当编码帧速率下降至低于预定阈值时：

基于帧质量度量向每个缓冲的输入帧分配权重，其中，所述帧质量度量是根据在捕获每个缓冲的输入帧期间出现的摄像机自动曝光设置的变化率而得到的，

选择最高加权的帧用于编码，以及

从缓冲器中丢弃多个较低加权的帧而不编码。

17.根据权利要求16所述的视频编码装置，其中，所述视频编码器包括预处理器，该预处理器估计所缓冲的帧的曝光，并且所述帧质量度量进一步是根据每个缓冲的输入帧与其前一帧之间的曝光变化而得到的。

18.根据权利要求16所述的视频编码装置，其中，所述视频编码器包括预处理器，该预处理器估计所缓冲的帧的亮度，并且所述帧质量度量进一步是根据每个缓冲的输入帧的估计亮度而得到的。