[发明专利]一种视频解码优化调整装置及方法有效
| 申请号: | 201810051581.X | 申请日: | 2018-01-19 |
| 公开(公告)号: | CN108462876B | 公开(公告)日: | 2021-01-26 |
| 发明(设计)人: | 廖裕民;卢捷 | 申请(专利权)人: | 瑞芯微电子股份有限公司 |
| 主分类号: | H04N19/179 | 分类号: | H04N19/179;H04N19/20 |
| 代理公司: | 福州市鼓楼区京华专利事务所(普通合伙) 35212 | 代理人: | 王美花 |
| 地址: | 350000 福建省*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 视频 解码 优化 调整 装置 方法 | ||
1.一种视频解码优化调整装置,其特征在于:包括视频解码电路、深度学习电路以及优化调整电路,所述视频解码电路、所述深度学习电路和所述优化调整电路依次连接;
在训练模式下,所述视频解码电路对视频源文件进行解码,并将解码后带标签的连续视频图像送往深度学习电路,所述深度学习电路通过对原图和帧间差值图使用不同的卷积核产生场景和内容识别结果,并根据视频源送过来的视频标签与所述场景和内容识别结果进行训练迭代直到完成训练;
在优化模式下,所述视频解码电路对视频源文件进行解码,并将解码后的连续视频图像送往深度学习电路,所述深度学习电路通过对原图和帧间差值图使用不同的卷积核产生场景和内容识别结果,并将识别结果送往所述优化调整电路,所述优化调整电路根据场景和内容识别结果对视频图像进行优化调整处理之后送往显示控制单元;
其中,
所述深度学习电路包括帧缓存单元、帧间差值计算单元、原图神经元输入单元、帧间信息输入神经元单元以及CNN卷积神经网络单元;所述帧缓存单元分别与所述视频解码电路、所述帧间差值计算单元以及所述原图神经元输入单元;所述CNN卷积神经网络单元分别与所述视频解码电路、原图神经元输入单元、帧间信息输入神经元单元以及所述优化调整电路连接;
所述优化调整电路包括场景判定单元、内容判定单元、图像后处理单元和字幕叠加单元;所述场景判定单元和所述内容判定单元均连接至所述CNN卷积神经网络单元,所述场景判定单元还连接图像后处理单元,所述字幕叠加单元连接所述内容判定单元和所述帧缓存单元;
所述优化调整电路还包括场景对应后处理参数存储单元、场景对应显示参数存储单元以及内容对应字幕存储单元,所述场景对应后处理参数存储单元连接至所述图像后处理单元,所述场景对应显示参数存储单元连接所述场景判定单元,所述内容对应字幕存储单元连接所述字幕叠加单元;
所述场景判定单元根据卷积神经网络产生的场景判定结果送往所述图像后处理单元;所述图像后处理单元收到场景信息后,读取场景对应的后处理参数存储单元,对视频图像进行处理,如果场景为黑夜或者黑暗图像,则整体提高图像对比度;如果场景为自然风光,则提高图像色度和饱和度,之后送往显示控制单元;所述内容判定单元根据卷积神经网络产生的内容判定结果送往所述字幕叠加单元;所述字幕叠加单元根据内容判定结果读取对应字幕,如果内容判定结果为暴力和色情的内容,字幕会自动加上”少儿不宜,请儿童回避”字幕。
2.根据权利要求1所述的一种视频解码优化调整装置,其特征在于:所述深度学习电路还包括参数存储单元,该参数存储单元用于存储网络权重与阈值、帧间卷积核和普通卷积核;
所述CNN卷积神经网络单元进一步包括神经网络运算单元、参数初始化单元、卷积偏置取数单元、卷积核取数单元、权值取数单元、误差计算单元以及反向传播回写单元;所述神经网络运算单元分别连接所述原图神经元输入单元和所述帧间信息输入神经元单元;所述参数初始化单元连接所述参数存储单元;所述神经网络运算单元还通过所述卷积偏置取数单元、卷积核取数单元、权值取数单元连接所述参数存储单元;所述神经网络运算单元依次通过所述误差计算单元以及反向传播回写单元连接所述参数存储单元。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于瑞芯微电子股份有限公司,未经瑞芯微电子股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810051581.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:视频解码方法及设备
- 下一篇:残差处理电路和相关的残差处理方法





