[发明专利]一种计算同步方法、同步管理装置以及计算单元

权利要求书

1.一种计算同步方法，其特征在于，所述方法应用于人工神经网络系统中，所述方法包括：

获取所述人工神经网络系统中第一神经网络层中的每个计算单元的负载状态信息，其中，所述每个计算单元的负载状态信息分别用于指示对应的计算单元所处理的计算任务的完成情况，所述第一神经网络层包括多个计算单元；

根据所述第一神经网络层中的每个计算单元的负载状态信息确定所述第一神经网络层中的每个计算单元均完成各自所处理的计算任务；

向所述第一神经网络层中的每个计算单元发送同步指示消息，所述同步指示消息用于指示所述第一神经网络层中的每个计算单元启动新的计算任务。

2.根据权利要求1所述方法，其特征在于，所述向所述第一神经网络层中的每个计算单元发送同步指示消息之前，还包括：

获取所述人工神经网络系统中第二神经网络层中的每个计算单元的负载状态信息，所述第二神经网络层包括多个计算单元，所述第二神经网络层为所述第一神经网络层的下一层神经网络层；

根据所述第二神经网络层中的每个计算单元的负载状态信息确定所述第二神经网络层中的每个计算单元均完成各自所处理的计算任务。

3.根据权利要求1或2所述方法，其特征在于，所述向所述第一神经网络层中的每个计算单元发送同步指示消息之前，还包括：

获取所述人工神经网络系统中第三神经网络层中每个计算单元的负载状态信息，所述第三神经网络层包括多个计算单元，所述第三神经网络层为所述第一神经网络层的上一层神经网络层；

根据所述第三神经网络层中每个计算单元的负载状态信息确定所述第三神经网络层中每个计算单元均完成各自所处理的计算任务。

4.根据权利要求1-3中任一项所述方法，其特征在于，所述负载状态信息包括下述信息中的至少一项：所述计算任务的起始时间点和持续时长，所述计算任务的结束时间点，以及用于指示是否完成所述计算任务的指示消息。

5.根据权利要求1-4中任一项所述方法，其特征在于，所述同步指示消息包括所述第一神经网络层的标识。

6.一种计算同步方法，其特征在于，所述方法由人工神经网络系统中的第一计算单元执行，所述方法包括：

向所述人工神经网络系统中的同步管理装置发送第一负载状态信息，所述第一负载状态信息用于指示所述第一计算单元处理的第一计算任务的完成情况，所述第一计算单元为所述人工神经网络系统中第一神经网络层中的一个计算单元；

接收所述同步管理装置发送的同步指示消息；

根据所述同步指示信息启动第二计算任务。

7.根据权利要求6所述方法，其特征在于，还包括：

根据所述同步指示消息向第二计算单元发送所述第一计算任务的计算结果，所述第二计算单元为所述人工神经网络系统中第二神经网络层的一个计算单元，所述第二神经网络层为所述第一神经网络层的下一层神经网络层。

8.根据权利要求6或7所述方法，其特征在于，所述根据所述同步指示信息启动第二计算任务之前，还包括：

接收所述人工神经网络系统中的第三计算单元发送的输入数据，所述输入数据为所述第三计算单元处理的第三计算任务的计算结果，所述第三计算单元为所述人工神经网络系统中的第三神经网络层中的一个计算单元，所述第三神经网络层为所述第一神经网络层的上一层神经网络层。

9.根据权利要求6-8中任一项所述方法，其特征在于，所述第一负载状态信息包括所述第一计算任务的起始时间点和持续时长，或起始时间点和结束时间点，或用于指示是否完成所述第一计算任务的指示消息。

10.根据权利要求6-9中任一项所述方法，其特征在于，所述同步指示消息包括所述第一神经网络层的标识。