[发明专利]基于中间层特征图压缩的卷积方法、模型及计算机设备在审
申请号: | 202110397024.5 | 申请日: | 2021-04-13 |
公开(公告)号: | CN113052258A | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 杜力;杜源;黄一珉;邵壮 | 申请(专利权)人: | 南京大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04 |
代理公司: | 北京弘权知识产权代理有限公司 11363 | 代理人: | 逯长明;许伟群 |
地址: | 210023 江苏省南京市栖*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 中间层 特征 压缩 卷积 方法 模型 计算机 设备 | ||
1.基于中间层特征图压缩的卷积方法,其特征在于,包括:
S101,获取输入图像;
S102,对所述输入图像进行预处理,所述预处理为高斯滤波处理;
S103,将预处理后的输入图像作为第一个硬件融合算子的输入,进行推理运算,获得第一个硬件融合算子的中间层特征图,所述硬件融合算子至少包括卷积层、池化层、BN层或Relu层中的任意一层,且若硬件融合算子包括卷积层,则所述卷积层处于第一层;
S104,判断中间层特征图的数据量是否大于预设的阈值,若中间层特征图的数据量小于或等于预设的阈值,则直接存储所述中间层特征图;若中间层特征图的数据量大于预设的阈值,则对中间层特征图进行量化及稀疏矩阵压缩,并存储经过量化及稀疏矩阵压缩后的中间层特征图;
S105,提取S104中存储的中间层特征图或量化及稀疏矩阵压缩后的中间层特征图,并作为下一个硬件融合算子的推理运算的输入,获得下一个硬件融合算子的中间层特征图;
S106,重复S104至S105,直至所有硬件融合算子完成推理运算,获得最终的输出结果。
2.根据权利要求1所述的基于中间层特征图压缩的卷积方法,其特征在于,在对中间层特征图进行量化及稀疏矩阵压缩的步骤之前,还包括:
对所述中间层特征图进行DCT变换,获得DCT变换后的中间层特征图。
3.根据权利要求2所述的基于中间层特征图压缩的卷积方法,其特征在于,在所述提取所述中间层特征图或量化及稀疏矩阵压缩后的中间层特征图的步骤之后,还包括:
若提取的中间中间层特征图经过量化及稀疏矩阵压缩,则对量化及稀疏矩阵压缩后的中间层特征图进行解压缩恢复量化和IDCT变换。
4.基于中间层特征图压缩的卷积方法,其特征在于,包括:
获取输入图像;
对所述输入图像进行预处理,所述预处理为高斯滤波处理;
将预处理后的输入图像作为多个硬件融合算子中第一个硬件融合算子的输入,依次进行多个硬件融合算子的推理运算,获得多个中间层特征图以及最终的输出结果;所述硬件融合算子至少包括卷积层、池化层、BN层或Relu层中的任意一层,且若硬件融合算子包括卷积层,则所述卷积层处于第一层;
其中,所述硬件融合算子包括第一类硬件融合算子和第二类硬件融合算子,所述第一类硬件融合算子的中间层特征图,在存储前均经过量化及稀疏矩阵压缩,所述第二类硬件融合算子的中间层特征图采用直接存储方式进行存储。
5.基于中间层特征图压缩的卷积模型,其特征在于,所述卷积模型用于执行权利要求1-3所述的一种基于中间层特征图压缩的卷积方法,所述一种基于中间层特征图压缩的卷积模型包括:
输入端,用于获取输入图像;
预处理模块;用于对输入图像进行高斯滤波处理;
多个硬件融合算子,用于获得多个中间层特征图以及最终输出矩阵,所述硬件融合算子至少包括卷积层、池化层、BN层或Relu层中的任意一层,且若硬件融合算子包括卷积层,则所述卷积层处于第一层;
数据量判断模块,用于判断中间层特征图的数据量是否大于预设的阈值;
量化及稀疏矩阵模块,用于对中间层特征图进行量化及稀疏矩阵压缩;
存储模块,用于存储中间层特征图或经过量化及稀疏矩阵压缩后的中间层特征图;
输出端,用于输出最终的输出结果。
6.根据权利要求5所述的基于中间层特征图压缩的卷积模型,其特征在于,包括:
DCT变换模块,用于对所述中间层特征图进行DCT变换。
7.根据权利要求6所述的基于中间层特征图压缩的卷积模型,其特征在于,包括:
IDCT变换模块,用于对所述中间层特征图进行IDCT变换;
解压缩及恢复量化模块,用于对量化及稀疏矩阵压缩后的中间层特征图进行解压缩及恢复量化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京大学,未经南京大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110397024.5/1.html,转载请声明来源钻瓜专利网。