[发明专利]一种基于人脸识别和口型识别的支付方法

权利要求书

1.一种基于人脸识别和口型识别的支付方法，其特征在于：

步骤SR01，用户在用户端设备客户端人脸注册步骤中注册自己的人脸信息和支付信息，用户端设备摄像头获取所述用户的人脸数据，包括用户的注册信息和支付信息发送到系统服务器；

步骤SR02，系统服务器将所述用户的人脸数据与所述用户的注册信息以及支付信息绑定，保存在数据库中；

步骤SR03，用户在客户端口型口令设置步骤中进行口型支付口令设置，用户端设备摄像头获取用户发出的口型变化的口型支付口令视频信息，发送到系统服务器；

步骤SR04，系统服务器在所述口型支付口令视频信息中提取所述口型支付口令数据，与所述用户的人脸信息和注册信息以及支付信息绑定，存储在数据库中；

步骤S01，当用户在支付设备进行支付时，所述支付设备摄像头采集用户的人脸数据，发送到系统服务器；

步骤S02，系统服务器将所述人脸数据与数据库中的人脸数据进行对比匹配，判断是否为系统的人脸注册用户，若是，则进入步骤S03，若不是，则结束；

步骤S03，显示或播放所述用户的昵称、头像至少其中之一，显示或播放请输入口型支付口令的提示；

步骤S04，用户无声地通过口型变化发出口型支付口令，支付设备摄像头采集所述口型支付口令视频信息，发送给系统服务器；

步骤S05，系统服务器将所述用户的口型支付口令视频信息中提取所述用户的口型支付口令数据，与数据库中存储的该用户的口型支付口令数据进行对比匹配，根据对比匹配的相似度是否大于阈值，判断是否为所述用户的口型支付口令；

步骤S06，判断是否大于相似度阈值，若是，则支付口令验证通过，向系统支付模块发出支付请求完成支付，并进入步骤S08，若否，则进入步骤S07；

步骤S07，支付设备接收所述支付口令未通过验证的信息，并显示或播放，结束；

步骤S08，支付设备接收所述支付完成信息，并显示或播放，结束。

2.如权利要求1所述的方法，其特征在于：

所述步骤SR01中的“系统服务器”由“系统第一服务器”所替代；

所述步骤SR02中的“系统服务器”由“系统第一服务器”所替代；

所述步骤SR03中的“系统服务器”由“系统第二服务器”所替代；

所述步骤SR04中的“系统服务器”由“系统第二服务器”所替代；

所述步骤S01中的“系统服务器”由“系统第一服务器”所替代；

所述步骤S02中的“系统服务器”由“系统第一服务器”所替代；

所述步骤S04中的“系统服务器”由“系统第二服务器”所替代；

所述步骤S05中的“系统服务器”由“系统第二服务器”所替代。

3.如权利要求1或2所述的方法，其特征在于：

所述步骤SR03，进一步为：

用户在客户端口型口令设置步骤中进行口型支付口令设置，口型支付口令设置界面显示“请用您的口型无声的输入您的口型支付口令”或“请输入您的口型支付口令不要出声”的提示，用户发出的口型变化的口型支付口令；

用户端设备摄像头获取用户发出的口型变化的口型支付口令视频信息，发送到系统服务器或系统第二服务器。

4.如权利要求1或2所述的方法，其特征在于：

所述步骤SR03，进一步为：

用户在客户端口型口令设置步骤中进行口型支付口令设置，口型支付口令设置界面弹出“请输入您的口型支付口令文字”，用户输入口型支付口令的文字；

口型支付口令设置界面显示“请用您的口型无声的输入您的口型支付口令”或“请输入您的口型支付口令不要出声”的提示，用户发出的口型变化的口型支付口令；

用户端设备摄像头获取用户发出的口型变化的口型支付口令视频信息，连同用户输入的口型支付口令文字发送到系统服务器或系统第二服务器。

5.如权利要求1或2所述的方法，其特征在于：

所述口型支付口令视频信息中提取所述口型支付口令数据，具体为：

从所述口型支付口令视频信息中定位用户口部区域，提取用户口型变化的口型口令关键点特征数据；

或，从所述口型支付口令视频信息中定位用户口部区域，通过卷积神经网络模型提取用户口型变化的口型口令关键点特征数据。