[发明专利]一种数据分析处理方法及装置在审
申请号: | 202010666380.8 | 申请日: | 2020-07-13 |
公开(公告)号: | CN111553471A | 公开(公告)日: | 2020-08-18 |
发明(设计)人: | 栾国庆;王必胜;张弥 | 申请(专利权)人: | 北京欣奕华数字科技有限公司 |
主分类号: | G06N3/04 | 分类号: | G06N3/04 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 孙小明 |
地址: | 100176 北京市大兴区经*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 分析 处理 方法 装置 | ||
1.一种数据分析处理方法,其特征在于,所述方法包括:
获取待处理的输入数据输入到神经网络模型;
利用神经网络模型中的计算单元对输入数据进行卷积运算,其中,神经网络模型根据输入数据确定输入到各计算单元的激活和权重,根据所述激活及权重确定激活矩阵及权重矩阵,对所述激活矩阵及权重矩阵的有效数据进行压缩编码,并存储所述有效数据及所述有效数据矩阵位置的编码索引,卷积时根据所述编码索引读取对应的有效数据进行卷积运算;
根据卷积运算的结果,得到数据处理后的数据。
2.根据权利要求1所述的方法,其特征在于,对所述激活矩阵及权重矩阵的有效数据进行压缩编码,包括:
利用完全状态编码CSC方式,根据所述激活矩阵/权重矩阵中有效激活数据/有效权重数据所在的行数和列数,对有效激活数据/有效权重数据压缩编码。
3.根据权利要求1所述的方法,其特征在于,存储所述有效数据之前,还包括:
将所述激活矩阵中有效激活数据压缩,按照第一预设映射规则映射为第一向量,所述第一向量的末端包括结束索引标识;
将所述权重矩阵中的有效权重数据,按照第二预设映射规则映射为第二向量,所述第二向量的末端包括结束索引标识。
4.根据权利要求2所述的方法,其特征在于,对有效激活数据/有效权重数据压缩编码,包括:
分别确定有效激活数据/有效权重数据在激活矩阵/权重矩阵中的行数,得到对应的行向量;
按照如下规则分别激活矩阵/权重矩阵中各列的映射数据,得到对应的地址向量:
确定激活矩阵/权重矩阵中当前列是否存在有效激活数据/有效权重数据,若是,将该列及之前列的有效激活数据/有效权重数据总数作为映射数据,否则,将指定数据作为映射数据。
5.根据权利要求4所述的方法,其特征在于,所述行向量的末端包括结束索引标识,所述地址向量的末端包括结束索引标识。
6.根据权利要求2所述的方法,其特征在于,卷积时根据编码索读取对应的有效数据进行卷积运算,包括:
根据所述行向量确定当前读取的有效激活数据/有效权重数据在激活矩阵/权重矩阵中的行数;
根据所述地址向量确定当前读取的有效激活数据/有效权重数据在激活矩阵/权重矩阵中的列数;
按照卷积规则将激活矩阵中的有效激活数据与权重矩阵中对应位置的有效权重数据,进行卷积运算。
7.根据权利要求1所述的方法,其特征在于,存储所述有效数据及所述有效数据矩阵位置的编码索引,包括:
将所述有效数据按照第一存储规则,将所述编码索引按照第二存储规则,存储到外部存储单元;
其中,卷积时根据所述第一存储规则和第二存储规则,确定读取的编码索引解码的有效数据的存储位置。
8.根据权利要求7所述的方法,其特征在于,所述外部存储单元为如下至少一种:静态随机存取存储器SRAM、动态随机存储器DRAM、增强动态随机存取存储器EDRAM、寄存器BP或非易失存储器NVM。
9.根据权利要求1所述的方法,其特征在于,对所述激活矩阵及权重矩阵的有效数据压缩编码,包括:
根据所述激活矩阵及权重矩阵中有效数据的分布,确定所述激活矩阵及权重矩阵的稀疏度;
确定所述稀疏度大于稀疏阈值时,对所述激活矩阵及权重矩阵的有效数据压缩编码。
10.根据权利要求9所述的方法,其特征在于,还包括:
确定所述稀疏度不大于稀疏阈值时,对所述激活矩阵中的全部数据和权重矩阵中的全部数据分别进行转化存储;
卷积时读取激活矩阵和权重矩阵的全部数据进行卷积运算,所述全部数据包括无效数据,确定当前运算的数据包含无效数据时,利用时钟门控方式跳过包含无效数据的运算步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京欣奕华数字科技有限公司,未经北京欣奕华数字科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010666380.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置