[发明专利]一种卷积神经网络计算加速方法及装置、设备、介质在审
| 申请号: | 201811286575.9 | 申请日: | 2018-10-31 |
| 公开(公告)号: | CN111126558A | 公开(公告)日: | 2020-05-08 |
| 发明(设计)人: | 郭晖;张楠赓 | 申请(专利权)人: | 北京嘉楠捷思信息技术有限公司 |
| 主分类号: | G06N3/04 | 分类号: | G06N3/04 |
| 代理公司: | 北京市中伦律师事务所 11410 | 代理人: | 杨黎峰;钟锦舜 |
| 地址: | 100094 北京市海淀*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 卷积 神经网络 计算 加速 方法 装置 设备 介质 | ||
1.一种卷积神经网络计算加速方法,其特征在于,包括:
利用第一函数,对原始的输入张量和卷积核进行量化处理,得到定点数形式的输入张量和卷积核;
利用第二函数,计算所述定点数形式的输入张量和卷积核分别的量化偏移,所述第一函数和所述第二函数包含相应的量化缩放系数,以及浮点数转定点数的转换逻辑;
根据所述量化偏移,计算所述定点数形式的输入张量和卷积核的第一卷积结果;
根据所述量化缩放系数和所述第一卷积结果,计算所述原始的输入张量和卷积核的第二卷积结果。
2.如权利要求1所述的方法,其特征在于,所述量化缩放系数包括用于输入张量的第一量化系数,以及用于卷积核的第二量化系数;
所述第一量化系数根据指定的量化值域的最值和所述原始的输入张量的最值计算得到,和/或
所述第二量化系数根据指定的量化值域的最值和所述原始的卷积核的最值计算得到。
3.如权利要求2所述的方法,其特征在于,量化值域的最值根据指定的量化位数计算得到。
4.如权利要求3所述的方法,其特征在于,所述指定的量化位数为指定的N进制数的量化位数w,按照如下公式计算所述量化值域的最值:
Qlow=-Nw-1;
Qhigh=Nw-1-1;
其中,Qlow表示所述量化值域的最小值,Qhigh表示所述量化值域的最大值。
5.如权利要求2所述的方法,其特征在于,所述第一量化系数按照公式计算得到,和/或
所述第二量化系数按照公式计算得到;
其中,SX表示所述第一量化系数,SW表示所述第二量化系数,Qlow表示所述量化值域的最小值,Qhigh表示所述量化值域的最大值,Xmin表示所述原始的输入张量的最小值,Xmax表示所述原始的输入张量的最大值,Wmin表示所述原始的卷积核的最小值,Wmax表示所述原始的卷积核的最大值。
6.如权利要求2所述的方法,其特征在于,在所述量化缩放系数以外,所述第一函数和/或所述第二函数还包含所述量化值域的最小值,以及所进行量化处理的对象的最小值;
其中,所述对象为所述原始的输入张量或者卷积核。
7.如权利要求6所述的方法,其特征在于,所述第一函数表示为:
其中,α表示所述对象,表示量化处理后的α,αmin表示α的最小值,Sα表示用于α的量化缩放系数,Qlow表示所述量化值域的最小值,round表示将浮点数四舍五入为定点数的函数。
8.如权利要求6所述的方法,其特征在于,所述第二函数表示为:
Bα=round[-Sα·αmin]+Qlow;
其中,Bα表示为进行量化处理后的α计算的量化偏移,αmin表示α的最小值,Sα表示用于α的量化缩放系数,Qlow表示所述量化值域的最小值,round表示将浮点数四舍五入为定点数的函数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京嘉楠捷思信息技术有限公司,未经北京嘉楠捷思信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811286575.9/1.html,转载请声明来源钻瓜专利网。





