[发明专利]多模态生物特征融合方法、装置、存储介质及设备

权利要求书

1.一种多模态生物特征融合方法，其特征在于，所述方法包括：

获取同一用户的两种生物特征，并分别与对应的生物特征模板进行识别；

在每种生物特征都识别成功后，对每种生物特征进行数据分析，获得对识别有影响的生物特征的要素信息；

对于其中一种生物特征，当所述生物特征的要素信息与对应生物特征模板的要素信息的差异度超过设定的程度，且满足另一种生物特征与对应生物特征模板的相似度高于预设阈值和/或两种生物特征的要素信息部分或全部相同时，将生物特征与对应的生物特征模板进行融合；

其中，所述预设阈值高于所述另一种生物特征识别成功时所要求的相似度。

2.根据权利要求1所述的多模态生物特征融合方法，其特征在于，所述两种生物特征分别为人脸特征和虹膜特征。

3.根据权利要求2所述的多模态生物特征融合方法，其特征在于，人脸镜头和虹膜镜头同时安装在云台上，所述获取同一用户的两种生物特征，包括：

获取通过人脸镜头采集的第一人脸图像；

对所述第一人脸图像进行人眼定位获得人眼坐标，根据所述人眼坐标与预设人眼参考坐标计算所述云台的第一转动角度，并使得云台根据第一转动角度进行转动；

所述云台根据第一转动角度进行转动时，获取通过虹膜镜头采集的第一虹膜图像；

对所述第一虹膜图像进行虹膜定位获得虹膜坐标，根据所述虹膜坐标与预设虹膜参考坐标计算所述云台的第二转动角度，并使得云台根据第二转动角度进行转动；

当所述云台旋转到第二转动角度时，获取通过人脸镜头和虹膜镜头分别采集的人脸图像和虹膜图像；

对所述人脸图像和虹膜图像进行特征提取，得到所述人脸特征和虹膜特征。

4.根据权利要求1所述的多模态生物特征融合方法，其特征在于，所述方法还包括：

将生物特征与对应的生物特征模板进行融合，获得辅助生物特征模板；

将生物特征与对应的生物特征模板和辅助生物特征模板分别进行比对，根据两种比对结果判断识别是否成功。

5.根据权利要求4所述的多模态生物特征融合方法，其特征在于，当生物特征与对应的生物特征模板的比对分值及生物特征与对应的与辅助生物特征模板的比对分值的差值小于预设值时，将所述生物特征模板替换为辅助生物特征模板。

6.根据权利要求2-5任一项所述的多模态生物特征融合方法，其特征在于，获取生物特征时，同时获取生物特征对应的采集条件；进行识别时，选用与生物特征具有相同采集条件的生物特征模板，对生物特征进行识别。

7.根据权利要求6所述的多模态生物特征融合方法，其特征在于，所述人脸特征的要素信息包括：是否佩戴眼镜/口罩，是否留胡须，人脸拍摄角度，两眼之间像素数，眼部区域的微整形，眼部区域的纹理或斑块；

所述虹膜特征的要素信息包括：虹膜直径像素数，瞳孔伸缩比例，是否佩戴眼镜/隐形眼镜/美瞳，眼部区域的微整形，眼部区域的纹理或斑块。

8.一种多模态生物特征融合装置，其特征在于，所述装置包括：

识别模块，用于获取同一用户的两种生物特征，并分别与对应的生物特征模板进行识别；

要素信息获取模块，用于在每种生物特征都识别成功后，对每种生物特征进行数据分析，获得对识别有影响的生物特征的要素信息；

融合模块，用于对于其中一种生物特征，当所述生物特征的要素信息与对应生物特征模板的要素信息的差异度超过设定的程度，且满足另一种生物特征与对应生物特征模板的相似度高于预设阈值和/或两种生物特征的要素信息部分或全部相同时，将生物特征与对应的生物特征模板进行融合；

其中，所述预设阈值高于所述另一种生物特征识别成功时所要求的相似度。

9.一种用于多模态生物特征融合的计算机可读存储介质，其特征在于，包括用于存储处理器可执行指令的存储器，所述指令被所述处理器执行时实现包括权利要求1-7任一所述多模态生物特征融合方法的步骤。

10.一种用于多模态生物特征融合的设备，其特征在于，包括至少一个处理器以及存储计算机可执行指令的存储器，所述处理器执行所述指令时实现权利要求1-7中任意一项所述多模态生物特征融合方法的步骤。