[发明专利]基于运动注意力模型的360度全景视频编码方法有效
申请号: | 201710122773.0 | 申请日: | 2017-03-03 |
公开(公告)号: | CN107454418B | 公开(公告)日: | 2019-11-22 |
发明(设计)人: | 虞晶怡;胡强 | 申请(专利权)人: | 叠境数字科技(上海)有限公司 |
主分类号: | H04N19/513 | 分类号: | H04N19/513;H04N19/527;H04N19/176 |
代理公司: | 31235 上海京沪专利代理事务所(普通合伙) | 代理人: | 周晓玲<国际申请>=<国际公布>=<进入 |
地址: | 200031 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 运动 注意力 模型 360 全景 视频 编码 方法 | ||
1.一种基于运动注意力模型的360度全景视频编码方法,其特征在于包括如下步骤:
步骤1:提取运动矢量得到运动矢量场,计算每个运动矢量的可靠度;
步骤2:根据可靠度进行可靠度的加权滤波预处理,以降低噪声;
步骤3:将步骤2修正后的运动矢量场进行全局运动补偿;
步骤4:构建运动注意力模型,得到编码块的运动注意力;运动注意力模型包括三方面的内容:运动矢量强度,空域运动矢量对比度和时域运动矢量对比度;运动矢量强度定义如下:
其中vx和vy分别为运动矢量v的x和y轴方向的分量,NF是规一化因子;空域运动矢量对比度定义如下:
其中v表示当前块运动矢量,vi表示空间8邻域块运动矢量;
时域运动矢量对比度定义如下:
其中vt表示当前块运动矢量,vt-i表示时域相邻块运动矢量;
每个编码块的运动注意力计算如下:
MA=MI+MCs+MCt;
步骤5:根据步骤4得到编码块的运动注意力,自适应分配码字。
2.根据权利要求1所述的一种基于运动注意力模型的360度全景视频编码方法,其特征在于:步骤1中,运动矢量可靠度定义如下:
其中v是当前块的运动矢量,MAD是当前块与匹配块的平均绝对差,μv是当前块8邻域块的平均运动矢量。
3.根据权利要求2所述的一种基于运动注意力模型的360度全景视频编码方法,其特征在于:步骤2中进行可靠度加权滤波:若g(v)大于0.1,表示当前块运动矢量可靠,则不用做任何处理;若g(v)小于0.1,表示当前块运动矢量不可靠,则对不可靠运动矢量做可靠度加权向量中值滤波,使其周围可靠的运动矢量代替当前不可靠运动矢量。
4.根据权利要求1所述的一种基于运动注意力模型的360度全景视频编码方法,其特征在于:步骤3中:将步骤2修正后的运动矢量场进行全局运动补偿,即统计当前帧中所有SKIP模式的运动矢量的均值,并对当前帧所有运动矢量减去该均值,得到全局运动补偿后运动矢量场。
5.根据权利要求1所述的基于运动注意力模型的360度全景视频编码方法,其特征在于,步骤5中:根据步骤4得到编码块的运动注意力来自适应分配码字,即对运动关注区域的分配较多码字,对不变化的视频区域分配较少码字,以此来提高运动关注场景的视频质量同时减少无用区域的编码码字,由此第n个编码块分配的码字计算如下:
其中MAn表示第n个编码块的运动注意力,Rframe表示整帧的总码字。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于叠境数字科技(上海)有限公司,未经叠境数字科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710122773.0/1.html,转载请声明来源钻瓜专利网。