[发明专利]神经网络剪枝在审
| 申请号： | 202080060921.0 | 申请日： | 2020-09-05 |
| 公开（公告）号： | CN114341891A | 公开（公告）日： | 2022-04-12 |
| 发明（设计）人： | 瓦希德·帕托维·尼亚;拉姆查拉姆·基纳丁卡拉·拉马克里希南;埃尤布·哈赫米·莎莉 | 申请（专利权）人： | 华为技术有限公司 |
| 主分类号： | G06N3/08 | 分类号： | G06N3/08;G06K9/62 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 一种用于在训练期间剪枝神经网络的神经网络(neural network，NN)块的方法和系统，所述NN块包括：卷积运算，所述卷积运算用于使用多个滤波器对输入特征图进行卷积，每个所述滤波器包括多个权重，以生成多个滤波器输出，每个所述滤波器输出对应于相应的滤波器；激活运算，所述激活运算用于为每个所述滤波器输出生成相应的非线性化输出；比例运算，所述比例运算用于通过将所述非线性化输出与掩码函数以及对应于所述滤波器的相应比例因子相乘，按比例缩放针对每个所述滤波器生成的所述非线性化输出。在训练期间：对于对应于滤波器的每个比例因子，通过最小化包括关于所述比例因子的第一正则化函数的损失函数的损失来学习所述比例因子；当所述比例因子的值满足预定标准时，通过从所述卷积运算中屏蔽所述滤波器来对与所述比例因子对应的所述滤波器进行选择性地剪枝。 | ||
| 搜索关键词： | 神经网络 剪枝 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司，未经华为技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202080060921.0/，转载请声明来源钻瓜专利网。
- 上一篇：用于电子烟的汽化器
- 下一篇：用于刚性探针的顺应有机基片组件
