[发明专利]用于视频图像处理的方法、装置和计算机设备有效
申请号: | 202110018295.5 | 申请日: | 2021-01-07 |
公开(公告)号: | CN113112012B | 公开(公告)日: | 2023-04-25 |
发明(设计)人: | 蒋薇;王炜;刘杉 | 申请(专利权)人: | 腾讯美国有限责任公司 |
主分类号: | H04N19/17 | 分类号: | H04N19/17;G06N3/082 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 李华;王琦 |
地址: | 美国加利福尼亚州*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 视频 图像 处理 方法 装置 计算机 设备 | ||
1.一种用于视频图像处理的方法,其特征在于,所述方法包括:
从神经网络训练设备获取经过预训练的神经网络;
与所述神经网络相关联的权重系数集多维张量被划分为超级块,从与神经网络相关联的多维张量所对应的超级块中,识别至少一个超级块;
对所述至少一个超级块的权重系数进行均一化,其中,所述均一化是将所述至少一个超级块中的一个超级块划分为多个块,并将每个块内的所有权重系数的绝对值设置为相同,同时保持权重系数的原始正/负符号;
基于已均一化的权重系数集,压缩神经网络模型;以及
将压缩后的所述神经网络模型提供给视频处理设备,所述视频处理设备利用所述神经网络模型提取视频图像的特征描述符,并根据所述特征描述符对所述视频图像进行处理。
2.根据权利要求1所述的方法,其特征在于,进一步包括:识别所述至少一个超级块之前,
在所述多维张量所对应的超级块中的每个超级块上计算均一化损失,并且基于所述均一化损失,为所述每个超级块确定最优的均一化结构,所述最优的均一化结构表示具有最小均一化损失的、将超级块划分为多个块的划分方式。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述深度神经网络中进行前向计算;
将所述权重系数集中的均一化权重系数的值固定,通过反向传播,更新所述权重系数集中的非固定权重系数。
4.根据权利要求3所述的方法,其特征在于,将所述权重系数集中的均一化权重系数的值固定包括:
将所述权重系数集中被均一化掩码标记的均一化权重系数的值固定,其中,所述均一化掩码中的每个条目指示该条目对应的权重系数是否均一化;其中,通过反向传播,更新所述权重系数集中的非固定权重系数包括:基于所述均一化掩码和通过所述前向计算确定的损失的梯度进行反向传播,更新所述权重系数集中的至少一个非固定权重系数并更新修剪掩码中的对应项。
5.根据权利要求2所述的方法,其特征在于,识别所述至少一个超级块包括:
基于每个超级块的最小均一化损失值,对所有超级块进行排序,根据排序结果,选择所述至少一个超级块,所述至少一个超级块在所有超级块中所占的比率等于给定的均一化比率。
6.根据权利要求5所述的方法,其特征在于,进一步包括:
执行一个迭代过程,所述一个迭代过程通过多次迭代以更新所述权重系数集中未经过均一化的权重系数;
增加所述均一化比率的值,基于所述均一化比率的值更新所述权重系数集,并执行下一次迭代过程。
7.根据权利要求1至3任一项所述的方法,其特征在于,所述压缩神经网络模型包括:通过对所述权重系数集进行量化和熵编码来压缩所述权重系数集。
8.根据权利要求1至3任一项所述的方法,其特征在于,所述已均一化的权重系数集包括具有相同绝对值的至少一个权重系数。
9.一种用于视频图像处理的装置,其特征在于,所述装置包括:
获取模块,用于从神经网络训练设备获取经过预训练的神经网络;
识别模块,用于从与所述神经网络相关联的多维张量所对应的超级块中,识别至少一个超级块,其中,与所述神经网络相关联的多维张量权重系数被划分为超级块;
均一化模块,用于对所述至少一个超级块的权重系数进行均一化,其中,所述均一化是将所述至少一个超级块中的一个超级块划分为多个块,并将每个块内的所有权重系数的绝对值设置为相同,同时保持权重系数的原始正/负符号;
压缩模块,用于基于已均一化的权重系数集,压缩神经网络模型;以及
提供模块,用于将压缩后的所述神经网络模型提供给视频处理设备,所述视频处理设备利用所述神经网络模型提取视频图像的特征描述符,并根据所述特征描述符对所述视频图像进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯美国有限责任公司,未经腾讯美国有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110018295.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:粘接装置
- 下一篇:双过滤器执行器组合装置
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序