[发明专利]基于唇语的活体检测方法、装置以及存储介质

权利要求书

1.一种基于唇语的活体检测方法，其特征在于，包括：

获取待检测的视频以及对应的语音音频，其中所述视频中包含目标对象的人脸图像；

根据所述人脸图像，生成描述所述目标对象的唇部关键点的关键点图像；以及

根据所述关键点图像以及所述语音音频，判断所述目标对象是否为活体。

2.根据权利要求1所述的方法，其特征在于，根据所述关键点图像以及所述语音音频，判断所述目标对象是否为活体的操作，包括：

利用预先训练的耦合3D卷积神经网络，对所述关键点图像和所述语音音频的音频特征进行匹配，判断所述目标对象是否为活体。

3.根据权利要求1所述的方法，其特征在于，根据所述人脸图像，生成描述所述目标对象的唇部关键点的关键点图像的操作，包括：

从所述人脸图像中确定所述目标对象的唇部位置的关键点；以及

对所述关键点的位置信息对应的区域以及非关键点的位置信息对应的区域进行二值化处理，生成所述关键点图像。

4.根据权利要求1所述的方法，其特征在于，从所述人脸图像中确定唇部位置的关键点的操作之前，还包括：对所述视频中的所述目标对象的人脸进行定位，确定所述人脸图像。

5.根据权利要求2所述的方法，其特征在于，还包括通过以下操作确定所述音频特征：

对所述语音音频进行解码、采样，生成与所述语音音频对应的二维波形图；以及

根据所述二维波形图，确定所述音频特征。

6.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时由处理器执行权利要求1至5中任意一项所述的方法。

7.一种基于唇语的活体检测装置，其特征在于，包括：

获取模块，用于获取待检测的视频以及对应的语音音频，其中所述视频中包含目标对象的人脸图像；

生成模块，用于根据所述人脸图像，生成描述所述目标对象的唇部关键点的关键点图像；以及

判断模块，用于根据所述关键点图像以及所述语音音频，判断所述目标对象是否为活体。

8.根据权利要求7所述的装置，其特征在于，所述判断模块，包括：判断子模块，用于利用预先训练的耦合3D卷积神经网络，对所述关键点图像和所述语音音频的音频特征进行匹配，判断所述目标对象是否为活体。

9.根据权利要求7所述的装置，其特征在于，所述生成模块，包括：

确定子模块，用于从所述人脸图像中确定所述目标对象的唇部位置的关键点；以及

二值化处理模块，用于对所述关键点的位置信息对应的区域以及非关键点的位置信息对应的区域进行二值化处理，生成所述关键点图像。

10.一种基于唇语的活体检测装置，其特征在于，包括：

处理器；以及

存储器，与所述处理器连接，用于为所述处理器提供处理以下处理步骤的指令：

获取待检测的视频以及对应的语音音频，其中所述视频中包含目标对象的人脸图像；

根据所述人脸图像，生成描述所述目标对象的唇部关键点的关键点图像；以及

根据所述关键点图像以及所述语音音频，判断所述目标对象是否为活体。