[发明专利]基于区块链的联邦学习处理方法、装置、系统以及介质在审

专利信息
申请号: 202011210463.2 申请日: 2020-11-03
公开(公告)号: CN114443754A 公开(公告)日: 2022-05-06
发明(设计)人: 王磊;赵德欣;曾然然 申请(专利权)人: 中国电信股份有限公司
主分类号: G06F16/27 分类号: G06F16/27;G06F16/242;G06F16/2455;G06F21/60;G06F21/64;G06Q40/04;G06N3/04;G06N3/08
代理公司: 中国贸促会专利商标事务所有限公司 11038 代理人: 方亮
地址: 100033 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 区块 联邦 学习 处理 方法 装置 系统 以及 介质
【说明书】:

发明提供了一种基于区块链的联邦学习处理方法、装置、区块链网络系统以及存储介质,其中的方法包括:控制各个区块节点基于测试样本对深度学习模型进行模型训练;获取各个区块节点完成模型训练的本地训练时长信息,确定进行联邦学习的可信区块节点;各个区块节点使用联邦学习算法和训练数据进行训练,获得模型参数的梯度数据;可信区块节点获取其他区块节点的梯度数据,进行梯度聚合处理。本公开的方法、装置以及存储介质,通过区块链技术进行联邦数据共享,寻找最佳性能的区块节点成为可信第三方机构,能够提升模型训练的收敛速度以及精度;可以实现去中心化,取消联邦学习中对于第三方证书机构或者其他可信实体机构的中心化依赖。

技术领域

本发明涉及区块链技术领域,尤其涉及一种基于区块链的联邦学习处理方法、装置、区块链网络系统以及存储介质。

背景技术

区块链技术可以基于共识机制进行结块处理来保存信息,从而保证信息不可篡改,提高信息安全性。联邦学习(Federated Learning)指的是多个数据拥有方在原始数据不出本地的情况下也可进行模型训练并得到最终模型的计算过程,并且保证模型效果与聚合训练效果的差距足够小。目前,可以在区块链场景下利用联邦学习方法进行模型训练,但是,在训练中无法有效识别参与节点的模型训练能力,容易出现降低模型训练的收敛速度以及模型的精度的情况。

发明内容

有鉴于此,本发明要解决的一个技术问题是提供一种基于区块链的联邦学习处理方法、装置、区块链网络系统以及存储介质。

根据本公开的第一方面,提供一种基于区块链的联邦学习处理方法,包括:获取测试样本,将所述测试样本发送给区块链网络中、需要进行模型训练的各个区块节点;在所述各个区块节点中部署深度学习模型,控制各个区块节点基于所述测试样本对部署在本地的深度学习模型进行模型训练;获取所述各个区块节点完成所述模型训练的本地训练时长信息,基于所述本地时长信息确定进行联邦学习的可信区块节点;生成联邦学习任务,基于所述联邦学习任务向所述各个区块节点发送联邦学习的训练命令,以使所述各个区块节点使用联邦学习算法和训练数据,对部署在本地的深度学习模型进行训练,获得模型参数的梯度数据;所述可信区块节点获取其他区块节点的梯度数据,进行梯度聚合处理。

可选地,所述基于所述本地时长信息确定进行联邦学习的可信区块节点包括:获取全部本地时长信息;将与所述全部本地时长信息中的最短本地时长信息相对应的区块节点确定为所述可信区块节点。

可选地,在基于所述测试样本进行模型训练时,根据预设的模型难度更新机制,对部署所述各个区块节点中的深度学习模型进行训练难度改变处理;在所述训练难度改变处理完成后,控制各个区块节点进行所述模型训练。

可选地,所述可信区块节点获取其他区块节点的梯度数据,进行梯度聚合处理包括:所述可信区块节点基于其他区块节点的梯度数据进行聚合处理,生成梯度聚合数据;所述可信区块节点执行预设的执行合约,将所述梯度聚合数据广播给所述其他区块节点,以使所述其他区块节点存储所述梯度聚合数据,并根据所述梯度聚合数据更新部署在本地的所述深度学习模型。

可选地,所述可信区块节点基于预设的密码生成机制生成公私钥对,将所述公私钥对发送给所述其他区块节点;所述可信区块节点和所述其他区块节点基于所述公私钥对进行数据传输。

可选地,所述其他区块节点使用所述公私钥对中的公钥对所述梯度数据进行加密,并将加密的所述梯度数据发送给所述可信区块节点;所述可信区块节点使用所述公私钥对中的私钥对加密的所述梯度数据进行解密,获得所述梯度数据。

可选地,所述可信区块节点使用所述公私钥对中的公钥对所述梯度聚合数据进行加密处理,并将加密的所述梯度聚合数据发送给所述其他区块节点;所述其他区块节点使用所述公私钥对中的私钥对加密的所述梯度聚合数据进行解密,获得所述梯度聚合数据。

可选地,所述深度学习模型包括:基于神经网络的声纹模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司,未经中国电信股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011210463.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top