[发明专利]基于联邦学习的虹膜图像特征提取方法、系统和装置

说明书

本发明属于图像识别领域，具体涉及了一种基于联邦学习的虹膜图像特征提取方法、系统和装置，旨在解决现有的虹膜特征提取模型无法兼顾隐私保护和多方合作，且单纯地堆叠虹膜数据进行模型训练无法提升模型的识别性能的问题。本发明通过获取本地虹膜数据集的本地虹膜特征，进而生成本地特征三元组和本地三元损失，于第三方计算瓦瑟斯坦联邦三元损失函数根据瓦瑟斯坦联邦三元损失函数更新本地平台的虹膜图像特征提取网络并用新的虹膜图像特征提取网络提取新虹膜图像特征。本发明利用不同来源的虹膜特征在特征空间中的分布特性和规律，辅助自身模型训练，使得抽取出的特征具备更好的可区分性，从而提升各个合作方的虹膜特征表达能力和识别准确性。

技术领域

本发明属于图像识别，具体涉及了一种基于联邦学习的虹膜图像特征提取方法、系统和装置。

背景技术

虹膜作为一种准确性高且安全性好的生物特征，正在广泛的应用于各种身份识别和安全控制场景，随着各国对于生物特征这种关乎生命财产安全的高度隐私数据的保护法规愈发严格后，构建大规模虹膜数据中心进行堆叠训练的方式趋于不可行，因此建立基于隐私保护和多方合作的联邦虹膜识别模型训练和特征学习框架势在必行。联邦学习可以联合多方数据进行训练，对于安全性和隐私性要求较高的场合更加适用。另一方面，联邦虹膜识别模型训练和特征学习框架可以联合多个虹膜数据库和各种虹膜识别神经网络协同学习，充分平衡各方识别性能和泛化能力，凸显各个模型和数据分布所具有的个异性。同时，通过第三方计算平台对同态加密后的多方特征进行交互学习，在严格保密条件下充分提升各方模型抽取特征在特征空间的可区分性，从而获得更高的虹膜识别准确性。

现有技术中，通过收集多个虹膜数据集，不考虑数据安全和隐私保护的前提下，建立单一数据中心，将全部数据直接堆叠混合在一起，送入深度神经网络等模型进行特征学习的训练方式。

基于深度学习框架的虹膜识别模型通常需要海量的虹膜样本进行学习，但是构建大规模虹膜数据中心存在安全性隐患和隐私保护的限制，因为作为高度隐私的生物特征原始数据一旦泄露将是不可逆的，但是缺乏大量训练数据的虹膜识别模型在实际应用中的泛化能力和边际效果将大幅下降，因此建立联合多方的数据去中心化的虹膜识别模型训练和特征学习的框架尤为重要。另外目前的大多数虹膜数据集之间由于采集规则，采集设备、采集环境、数据规模、图片质量等方面存在着明显的差异，不同的虹膜数据库分布显著不同，单纯的依赖于堆叠无限制的虹膜数据并不能持续提升模型的识别性能，甚至会起到反作用。目前，缺乏一种兼顾隐私保护和多方合作的虹膜识别模型训练和特征学习框架，以充分挖掘出多方数据的潜能和深层价值，使得各个合作方的识别模型都能受益于他方数据集的空间分布和模型特征表达能力，从而进一步提升自身的识别能力和泛化能力。

发明内容

为了解决现有技术中的上述问题，即如何在保护隐私的基础上，使虹膜特征提取网络学习多个其他平台的虹膜特征数据，同时还保留各合作方的个异性，提高虹膜识别的准确性提高模型的识别性能，本发明提供了一种基于联邦学习的虹膜图像特征提取方法方法，所述方法包括：

步骤S100，各本地平台的虹膜图像预处理网络对本地虹膜数据集进行预处理生成归一化虹膜图像集和相应的虹膜有效区域掩膜图像集，并基于所述归一化虹膜图像集和相应的虹膜有效区域掩膜图像集生成虹膜有效区域图像集；所述预处理包括眼部检测、虹膜分割和归一化；

步骤S200，基于所述虹膜有效区域图像集，通过各本地平台的虹膜图像特征提取网络获取本地虹膜特征，基于所述本地虹膜特征生成本地特征三元组和本地三元损失；

步骤S300，对所述本地特征三元组和本地三元损失进行同态加密，生成加密本地特征三元组和加密本地三元损失；

步骤S400，第三方联邦计算平台基于所述加密本地特征三元组和加密本地三元损失计算瓦瑟斯坦联邦三元损失函数；