[发明专利]一种基于芯粒的数据处理的方法、装置、介质及设备有效

专利信息
申请号: 202310156339.X 申请日: 2023-02-20
公开(公告)号: CN115829017B 公开(公告)日: 2023-05-23
发明(设计)人: 毛旷;许慧卿;潘秋红;汤昭荣;杨弢;杨佳宁;叶茂伟;王颖 申请(专利权)人: 之江实验室
主分类号: G06N3/065 分类号: G06N3/065;G06N3/082
代理公司: 北京博思佳知识产权代理有限公司 11415 代理人: 董晓盈
地址: 311121 浙江省杭*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 数据处理 方法 装置 介质 设备
【权利要求书】:

1.一种基于芯粒的数据处理的方法,其特征在于,包括:

获取芯粒阵列的阵列尺寸以及神经网络模型对应的有向无环图,所述芯粒阵列是由各芯粒组成的,所述有向无环图用于表示所述神经网络模型中的各算子的运算顺序;

根据所述芯粒阵列的阵列尺寸,构建各类算子的划分策略集合以及芯粒分配策略集合,所述划分策略集合是将算子的运算任务划分为各维度的运算任务的划分策略的集合;

通过广度优先搜索算法遍历所述神经网络模型对应的有向无环图,并在遍历过程中,对各算子对应的深度进行标记,其中,针对所述神经网络模型中的每个算子,当遍历到该算子时,若前序算子未被标记,则遍历下一个算子,若前序算子被标记,则根据前序算子的深度,对该算子的深度进行标记;

根据所述芯粒阵列的阵列尺寸,确定芯粒阵列的芯粒数量,针对每个深度,根据确定出的所述神经网络模型中的各算子在所述有向无环图中的深度,若该深度对应的并行运算组中的各算子的数量未超过所述芯粒数量,则将当前遍历到的算子加入该深度对应的并行运算组,若该深度对应的并行运算组中的各算子的数量超过所述芯粒数量,则创建该深度对应的额外并行运算组,将当前遍历到的算子加入该深度对应的额外并行运算组;将该深度对应的并行运算组中的各算子、该深度对应的额外并行运算组中的各算子以及该深度的下一深度对应的并行运算组中的各算子加入该深度对应的调度搜索模块;

针对每个调度搜索模块,根据所述各类算子的划分策略集合以及所述芯粒分配策略集合,确定该调度搜索模块对应的满足预设条件的各策略组合,并通过该调度搜索模块,计算该调度搜索模块中对应的各策略组合所需的运算开销,确定目标策略组合;

根据各调度搜索模块对应的目标策略组合,执行所述神经网络模型的运算任务。

2.如权利要求1所述的方法,其特征在于,所述预设条件包括:每个并行运算组已分配的芯粒数量与待分配的芯粒数量之和不大于所述芯粒阵列的芯粒数量;

每个并行运算组已分配的芯粒阵列的行数与待分配的芯粒阵列的行数之和不大于所述芯粒阵列的行数;

每个并行运算组已分配的芯粒阵列的列数与待分配的芯粒阵列的列数之和不大于所述芯粒阵列的列数。

3.如权利要求1所述的方法,其特征在于,针对每个调度搜索模块,根据各类算子的划分策略集合以及芯粒分配策略集合,确定该调度搜索模块对应的满足预设条件的各策略组合,具体包括:

针对每个深度对应的调度搜索模块,从该深度的上一深度对应的调度搜索模块中,获取该深度对应的并行运算组中的各算子的目标策略组合;

根据各类算子的划分策略集合以及芯粒分配策略集合,确定该深度的下一深度对应的并行运算组中的各算子的满足预设条件的各策略组合;

根据该深度对应的并行运算组中的各算子的目标策略组合,以及该深度的下一深度对应的并行运算组中的各算子的满足预设条件的各策略组合,确定该深度对应的调度搜索模块的满足预设条件的各策略组合。

4.如权利要求1所述的方法,其特征在于,通过该调度搜索模块,计算该调度搜索模块中对应的各策略组合所需的运算开销,确定目标策略组合,具体包括:

通过该调度搜索模块,计算该调度搜索模块中对应的各策略组合所需的各算子的运算开销、芯粒阵列中的路由转发延迟以及数据传输时长,确定目标策略组合。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于之江实验室,未经之江实验室许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202310156339.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top