[发明专利]视讯问答流程的身份识别方法、装置、设备及存储介质

说明书

本发明涉及人工智能领域，公开了视讯问答流程的身份识别方法、装置、设备及存储介质，用于避免误判，提高识别结果的准确性。本发明方法包括：在开始视讯问答流程前，得到初始人脸特征和初始声纹特征；当目标用户通过人脸识别验证时，根据初始人脸特征进行静默人脸比对，得到静默人脸识别结果，并通过初始声纹特征进行静默声纹比对，得到静默声纹识别结果；根据静默人脸识别结果和静默声纹识别结果判断在视讯问答流程中是否有换人；若没有换人，则结合视讯问答流程中的静默人脸比对相似度方差和声纹比对相似度方差，再次判断视讯问答流程中是否有换人。此外，本发明还涉及区块链技术，初始人脸特征和初始声纹特征可存储于区块链中。

技术领域

本发明涉及人脸比对领域，尤其涉及一种视讯问答流程的身份识别方法、装置、设备及存储介质。

背景技术

银行的业务很多需要客户进行远程音视频，这个过程也称为视讯。视讯过程通常需要对用户是否换人进行操作合规性进行检测。以前的音视频都是客户与坐席人员进行人工视讯，人工视讯的时候就可以通过坐席人员来根据音视频的画面和声音来对用户是否换人进行操作合规性检查。

现在随着技术的发展，目前银行的视讯大部分都是使用智能视讯替代了传统的人工视讯。按照银行业监管的要求，客户在办理许多银行业务的时候需要客户本人在手机银行APP进行远程视讯，回答一些机器人播报的问题，并且对这个全过程进行录音录像保存。

现有方案采用抽取视频帧的方式进行人脸识别，只能对单帧视频进行人脸比对，是以相似度的大小作为判断的，如果抽取的这一帧刚好用户不再视频内就会导致误判。

发明内容

本发明提供了一种视讯问答流程的身份识别方法、装置、设备及存储介质，用于将人脸识别结果与声纹识别结果结合作为身份判断依据，避免对答题人身份的误判，提高识别结果的准确性。

本发明实施例的第一方面提供一种视讯问答流程的身份识别方法，包括：在开始视讯问答流程前，采用炫光活体人脸检测模型对目标用户进行人脸识别验证，并采集所述目标用户朗读预置文本的语音信息并从所述语音信息中提取声纹特征，得到初始人脸特征和初始声纹特征；当目标用户通过人脸识别验证时，开始视讯问答流程，根据所述初始人脸特征和预置的静默人脸比对模型对答题人的人脸图像进行静默人脸比对，得到静默人脸识别结果，并通过所述初始声纹特征和预置的静默声纹比对模型对答题人的回答语音进行静默声纹比对，得到静默声纹识别结果；根据所述静默人脸识别结果和静默声纹识别结果判断在所述视讯问答流程中是否有换人；若在所述视讯问答流程中没有换人，则结合视讯问答流程中的静默人脸比对相似度方差和声纹比对相似度方差，再次判断视讯问答流程中是否有换人。

可选的，在本发明实施例第一方面的第一种实现方式中，所述当目标用户通过人脸识别验证时，开始视讯问答流程，根据所述初始人脸特征和预置的静默人脸比对模型对答题人的人脸图像进行静默人脸比对，得到静默人脸识别结果，并通过所述初始声纹特征和预置的静默声纹比对模型对答题人的回答语音进行静默声纹比对，得到静默声纹识别结果，包括：当目标用户通过人脸识别验证时，录制视讯问答流程的视频，得到录制的视频，根据所述录制的视频调用预置的静默人脸比对模型对所述初始人脸特征进行静默人脸比对，得到静默人脸识别结果，所述录制的视频包括答题人的人脸图像；录制视讯问答流程的音频，得到录制的音频，根据所述录制的音频调用预置的静默声纹比对模型对所述初始声纹特征进行静默声纹比对，得到静默声纹识别结果，所述录制的音频包括答题人的回答语音。