[发明专利]矩阵计算电路、方法、电子设备及计算机可读存储介质在审

专利信息
申请号: 202010586808.8 申请日: 2020-06-24
公开(公告)号: CN113836481A 公开(公告)日: 2021-12-24
发明(设计)人: 不公告发明人 申请(专利权)人: 北京希姆计算科技有限公司
主分类号: G06F17/16 分类号: G06F17/16
代理公司: 北京竹辰知识产权代理事务所(普通合伙) 11706 代理人: 聂鹏
地址: 100080 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 矩阵 计算 电路 方法 电子设备 计算机 可读 存储 介质
【说明书】:

本公开实施例公开了一种矩阵计算电路、方法、电子设备及计算机可读存储介质。其中该矩阵计算电路包括:指令解码电路,用于解码矩阵计算指令得到第一矩阵的首地址和第二矩阵的首地址;第一数据读取电路,用于根据所述第一矩阵的首地址生成第一数据的读取地址;根据所述第一数据的读取地址读取所述第一数据以及所述第一数据在所述第一矩阵中的位置;第二数据读取电路,用于根据所述第二矩阵的首地址和所述第一数据在所述第一矩阵中的位置生成第二数据的读取地址;根据所述第二数据的读取地址读取所述第二数据;计算电路,用于根据所述第一数据和所述第二数据计算得到第三数据。上述矩阵计算电路通过第一数据在第一矩阵中的位置生成第二数据的读取地址,减少了第二数据的读取数量以及计算量,解决了现有技术中浪费带宽的技术问题。

技术领域

本公开涉及处理器领域,尤其涉及一种矩阵计算电路、方法、电子设备及计算机可读存储介质。

背景技术

随着科学技术的发展,人类社会正在快速进入智能时代。智能时代的重要特点,就是人们获得数据的种类越来越多,获得数据的量越来越大,而对处理数据的速度要求越来越高。芯片是任务分配的基石,它从根本上决定了人们处理数据的能力。从应用领域来看,芯片主要有两条路线:一条是通用芯片路线,例如CPU等,它们能提供极大的灵活性,但是在处理特定领域算法时有效算力比较低;另一条是专用芯片路线,例如TPU等,它们在某些特定领域,能发挥较高的有效算力,但是面对灵活多变的比较通用的领域,它们处理能力比较差甚至无法处理。由于智能时代的数据种类繁多且数量巨大,所以要求芯片既具有极高的灵活性,能处理不同领域且日新月异的算法,又具有极强的处理能力,能快速处理极大的且急剧增长的数据量。

在神经网络计算中,卷积计算占了总运算量的大部分,而卷积计算可以转换成矩阵乘计算,因此要提高神经网络任务中的吞吐量、降低延时、提升芯片的有效算力,重点在于提升矩阵乘计算的速度。

图1a为在神经网络中矩阵乘计算的示意图。如图1a所示,M1为数据矩阵,M2为参数矩阵,M为输出矩阵。M1中的一行数据和M2中的一列参数做乘加计算得到M中的一个数据。很多神经网络中的数据矩阵和/或参数矩阵是稀疏矩阵,即矩阵的数据中存在大量的0。为了提升矩阵的计算速度,可以针对稀疏矩阵乘计算进行优化。

现有的优化方式一般是采取跳零计算的方法,即先将所有的数据和参数都取出来,在进行计算前判断数据是否为0。如果数据为0,则丢弃与之对应的参数,跳过此数据不计算;如果数据非0,则进行计算。在这种方法中,数据矩阵和参数矩阵的所有元素都会存储下来,如图1b所示。其中,P_D是数据矩阵存储的起始地址,P_W是参数矩阵存储的起始地址;数据矩阵和参数矩阵中的元素都会全部存储。在进行运算时,它们也会被一一读出来,将数据进行比较,再选择非0数据和其对应的参数进行运算,最后得到结果。

上述方案存在以下缺点:1、浪费存储。因为为0的数据也被存储下来了,但是在计算的时候并没有用到这些为0的数据;2、浪费带宽,因为数据为0时也会被读出来,占用带宽,但是其在计算的时候并没有用到。

发明内容

提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。

为了解决现有技术中的上述技术问题,本公开实施例提出如下技术方案:

第一方面,本公开实施例提供一种矩阵计算电路,其特征在于,包括:

指令解码电路,用于解码矩阵计算指令得到第一矩阵的首地址和第二矩阵的首地址;

第一数据读取电路,用于根据所述第一矩阵的首地址生成第一数据的读取地址;根据所述第一数据的读取地址读取所述第一数据以及所述第一数据在所述第一矩阵中的位置;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京希姆计算科技有限公司,未经北京希姆计算科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010586808.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top