[发明专利]模型量化方法、装置、电子设备和计算机可读存储介质在审
| 申请号: | 202110869654.8 | 申请日: | 2021-07-30 |
| 公开(公告)号: | CN113610709A | 公开(公告)日: | 2021-11-05 |
| 发明(设计)人: | 邓宣 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
| 主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N20/00 |
| 代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 魏宇星 |
| 地址: | 523860 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 模型 量化 方法 装置 电子设备 计算机 可读 存储 介质 | ||
本公开实施例涉及一种模型量化方法、装置、电子设备和计算机可读存储介质。所述方法包括:将图像输入深度学习模型中,获取深度学习模型对图像的分辨率进行处理所需的时延和功耗;根据时延、功耗、原始网络参数和强化学习算法训练深度学习模型,得到深度学习模型的各网络层的目标量化位宽;根据各网络层的目标量化位宽,对目标量化位宽对应的深度学习模型各网络层的权重和激活值进行量化,得到分辨率模型。采用本方法可以平衡量化后的超分辨率模型的运算精度和量化后的模型的占用存储空间。
技术领域
本申请涉及机器学习技术领域,特别是涉及一种模型量化方法、装置、电子设备和计算机可读存储介质。
背景技术
随着人工智能技术的发展,可以采用超分辨率模型对图像的分辨率进行处理提升。但是,现有的超分辨率模型结构大而复杂,导致超分辨率模型的运算速度受到计算机设备存储能力的限制。因此,为了减少计算机存储的压力同时提高模型的运算速度,需要对超分辨率模型的各卷积层进行定点量化。
传统技术中,主要是将超分辨率模型整个网络层的权重和激活值固定量化到某个固定的位宽,得到量化后的超分辨率模型。然而,传统的模型量化方法,存在量化后的超分辨率模型的运算精度和量化后的模型的占用存储空间难以平衡的问题。
发明内容
本申请实施例提供了一种模型量化方法、装置、电子设备、计算机可读存储介质,可以平衡量化后的超分辨率模型的运算精度和量化后的模型的占用存储空间。
第一方面,提供了一种模型量化方法,包括:
将图像输入深度学习模型中,获取所述深度学习模型对所述图像的分辨率进行处理所需的时延和功耗;
根据所述时延、所述功耗、所述深度学习模型的原始网络参数和预设的强化学习算法训练所述深度学习模型,得到所述深度学习模型的各网络层的目标量化位宽;
根据各所述网络层的目标量化位宽,对所述目标量化位宽对应的深度学习模型各网络层的权重和激活值进行量化,得到分辨率模型。
第二方面,提供了一种模型量化装置,包括:
第一获取模块,用于将图像输入深度学习模型中,获取所述深度学习模型对所述图像的分辨率进行处理所需的时延和功耗;
第二获取模块,用于根据所述时延、所述功耗、所述深度学习模型的原始网络参数和预设的强化学习算法训练所述深度学习模型,得到所述深度学习模型的各网络层的目标量化位宽;
量化模块,用于根据各所述网络层的目标量化位宽,对所述目标量化位宽对应的深度学习模型各网络层的权重和激活值进行量化,得到分辨率模型。
第三方面,提供了一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如第一方面所述的模型量化方法的步骤。
第四方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的模型量化方法的步骤。
上述模型量化方法、装置、电子设备和计算机可读存储介质,通过将图像输入深度学习模型中,能够获取该深度学习模型对图像的分辨率进行处理所需的时延和功耗,从而可以根据得到的时延、功耗、深度学习模型的原始网络参数和预设的强化学习算法训练深度学习模型,得到该深度学习模型的各网络层的目标量化位宽,进而可以根据得到的各网络层的目标量化位宽,对目标量化位宽对应的深度学习模型各网络层的权重和激活值进行量化,得到分辨率模型,由于该方法得到的是深度学习模型的各网络层的目标量化位宽,而不同的网络层采用不同的量化位宽能够有效的减少计算机存储的压力同时提高模型的运算速度,这样根据深度学习模型的各网络层的目标量化位宽,对该目标量化位宽对应的深度学习模型各网络层的权重和激活值进行量化,平衡了得到的分辨率模型的运算精度和分辨率模型的占用存储空间。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110869654.8/2.html,转载请声明来源钻瓜专利网。





