[发明专利]一种视频编码方法及系统

说明书

本发明涉及多媒体视频图像信息处理技术领域，公开了一种视频编码方法及系统，该视频编码方法包括：将输入视频流转换为RGB图像；对该RGB图像进行目标检测和运动检测，以识别RGB图像的目标像素和运动像素；对上述目标像素和运动像素进行融合处理，以确定RGB图像中的感兴趣像素和非感兴趣像素；根据感兴趣像素和非感兴趣像素的分布，确定感兴趣区域和非感兴趣区域；根据设定的目标码率，为感兴趣区域和非感兴趣区域分配编码码率。本发明使得感兴趣区域的QP比较小，提高了感兴趣区域的清晰度。

技术领域

本发明涉及多媒体视频图像信息处理技术领域，特别涉及一种视频编码方法及系统。

背景技术

当前，越来越多的会议从线下转到线上，网络会议普遍要求达到高清画质，而网络的复杂性导致网络带宽不断变化，给视频压缩和视频传输带来越来越多的挑战，高清和超高清视频压缩编码是必不可少的技术手段，同时视频压缩编码的性能和复杂度也直接影响着高清和超高清视频的应用范围和潜力。

因此，在保持一定视频质量的情况下，提高视频编码的压缩比，降低视频编码的复杂度是普遍追求的目标。现有技术相继出现了HEVC、H.264、VVC等编码方法，但是编码速度依然无法满足高清和超高清视频压缩的实际需求。中国专利公开号为CN113115043A ，公开了一种视频编码器、视频编码系统和视频编码方法，其主要采用每一帧图像使用多个视频编码器共同完成的方案，减少编码时间、降低编码延迟、实现对高清视频源的实时编码。

实时音视频技术是一种终端服务，为行业提供高并发、低延时、高清流畅、安全可靠的全场景、全互动、全实时的音视频服务。然而，实时音视频技术在带宽有限的情况下，在仍然保持高清视频编码的情况下，解码播放产生卡顿。如果编码器提高QP，会导致画面模糊，基于感兴趣区域的编码是解决此类问题的方法之一。例如中国专利公开号为CN106162177A，公开了一种视频编码方法和装置，通过对运动目标的识别确定感兴趣区域并通过平滑滤波进行高保真编码；又如中国专利公开号为CN103297754A，公开了一种监控视频自适应感兴趣区域编码系统，使用ROI检测、H.264编码实现基于H.264协议的数据压缩与关键信息高质量保存之间的折中。因此，在视频压缩和传输过程中，在码率不变的情况下，如何保持感兴趣区域清晰度，以减少网络带宽占用，使用户能够在低带宽/网速下享受超高清视频的观看乐趣，成为亟需解决的问题。

发明内容

鉴于现有技术中的上述缺陷或不足，本发明提供了一种视频编码方法及系统，其采用目标检测和运动检测相结合的方式，来提取视频中的感兴趣区域，再采用和博弈论相结合的方式进行编码码率的分配。

本发明的一个方面，提供了一种视频编码方法，包括：

将输入视频流转换为RGB图像；

对RGB图像进行目标检测和运动检测，以识别该RGB图像的目标像素和运动像素；

对上述目标像素和运动像素进行融合处理，以确定RGB图像中的感兴趣像素和非感兴趣像素；

根据上述感兴趣像素和非感兴趣像素的分布，确定感兴趣区域和非感兴趣区域；

根据设定的目标码率，为上述感兴趣区域和非感兴趣区域分配编码码率。

进一步的，根据设定的目标码率，为感兴趣区域和非感兴趣区域分配编码码率的步骤包括：

根据下式计算取最小值时的感兴趣区域的码率：