[发明专利]用于传递视频中的感兴趣区域信息的方法和设备

权利要求书

1.一种用于传递视频中的感兴趣区域信息的方法，包括：

从所述视频的第一视频帧中确定感兴趣区域信息；

响应于存在作为所述第一视频帧的前一视频帧的第二视频帧，则确定所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息间的残差作为感兴趣区域残差掩码；

对所述感兴趣区域残差掩码进行压缩，以降低所述感兴趣区域残差掩码的数据量；

对所述压缩后的感兴趣区域残差掩码与所述第一视频帧的编码视频数据进行补充增强信息封装，以得到第一封装视频帧；以及

传递所述第一封装视频帧。

2.根据权利要求1所述的方法，其中，所述视频的每个视频帧中的每个像素具有灰度分量。

3.根据权利要求2所述的方法，其中，从所述视频的第一视频帧中确定感兴趣区域信息，包括：

基于所述第一视频帧中的所有像素的灰度分量来确定感兴趣区域；以及

基于所述确定的感兴趣区域来确定所述感兴趣区域信息。

4.根据权利要求3所述的方法，其中，基于所述确定的感兴趣区域来确定所述感兴趣区域信息包括：

以像素块为单位来基于所述确定的感兴趣区域确定所述感兴趣区域信息。

5.根据权利要求1所述的方法，还包括：

响应于不存在作为所述第一视频帧的前一视频帧的第二视频帧，则确定所述第一视频帧的感兴趣区域信息为所述感兴趣区域残差掩码。

6.根据权利要求1所述的方法，其中，确定所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息间的残差包括：

对所述第一视频帧的感兴趣区域信息与所述第二视频帧的感兴趣区域信息进行异或操作来确定所述残差。

7.根据权利要求1所述的方法，其中，所述第一视频帧的编码视频数据包括对所述第一视频帧进行H.264或者H.265编码而得到编码视频数据。

8.根据权利要求1所述的方法，其中，传递所述第一封装视频帧包括：

传递所述第一封装视频帧到视频客户端进行渲染。

9.一种用于在视频的渲染画面上提供辅助信息的方法，包括：

获取根据权利要求1中的方法传递的第一封装视频帧；

从所述第一封装视频帧中获取所述第一封装视频帧的感兴趣区域信息；

获取所述第一封装视频帧对应的辅助信息；

在对所述第一封装视频帧中的编码视频数据进行渲染的同时，在所述编码视频数据的渲染画面上提供所述辅助信息，并且将所述辅助信息中与所述感兴趣区域信息表示的感兴趣区域对应的辅助信息设置为透明的。

10.根据权利要求9所述的方法，其中，从所述第一封装视频帧中获取所述第一封装视频帧的感兴趣区域信息包括：

从所述第一封装视频帧中获取压缩后的感兴趣区域残差掩码；

对所述压缩后的感兴趣区域残差掩码解压缩以得到未压缩的感兴趣区域残差掩码；

响应于存在第二封装视频帧作为所述第一封装视频帧的前一封装视频帧，则确定所述未压缩的感兴趣区域残差掩码与所述第二封装视频帧的未压缩的感兴趣区域残差掩码的残差作为所述第一封装视频帧的感兴趣区域信息。

11.根据权利要求9所述的方法，所述辅助信息包括弹幕、动画、图标和字幕中的一个或多个。