[发明专利]一种人脸关键点处理方法、装置及设备

说明书

本说明书实施例公开了一种人脸关键点处理方法、装置及设备，包括：将当前帧的人脸图像输入预先训练的人脸关键点模型，预测得到多个预设区域的人脸基础关键点，并预测得到多个预设区域中的指定区域的人脸补充关键点；确定根据当前帧之前的各帧人脸图像更新得到的人脸基础关键点集合和人脸补充关键点集合，人脸基础关键点集合和人脸补充关键点集合用于进行图像处理；根据分别为上一帧的人脸图像和当前帧的人脸图像预测的人脸基础关键点和人脸补充关键点，进行人脸运动检测；根据人脸运动检测的结果，若确定指定区域发生了人脸运动，则根据为当前帧的人脸图像预测的人脸补充关键点，对人脸补充关键点集合进行更新，以便相应地更新图像处理。

技术领域

本说明书涉及计算机技术领域，尤其涉及一种人脸关键点处理方法、装置及设备。

背景技术

人脸关键点检测是人脸图像处理过程中承上启下的重要环节。在完成人脸关键点检测后，对输入的人脸检测框图进行处理，便可以在人脸检测框图上定位出面部关键特征点，包括眼睛、鼻尖、嘴角、人脸各部位轮廓点等。在人脸识别、美颜、表情分析、人脸追踪等技术领域中得到广泛应用。

现有的关键点检测方案中，在模型配置有限的前提下，大多数都存在关键点数量不足的问题，导致关键点连接的线段不能准确贴合人脸的各部位，影响后续图像处理效果。同时，由于算法定位的关键点会有一定的误差，在处理连续多帧的人脸图像时，随机误差往往表现为输出关键点的抖动，而导致后续图像处理效果不稳定。

基于此，针对连续多帧的人脸图像现需要一种更准确的关键点预测方式。

发明内容

本说明书一个或多个实施例提供了一种人脸关键点处理方法、装置及设备，用于解决如下技术问题：

现有的关键点检测方案中，在模型配置有限的前提下，大多数都存在关键点数量不足的问题，导致关键点连接的线段不能准确贴合人脸的各部位，影响后续图像处理效果。同时，由于算法定位的关键点会有一定的误差，在处理连续多帧的人脸图像时，随机误差往往表现为输出关键点的抖动，而导致后续图像处理效果不稳定。

本说明书一个或多个实施例采用下述技术方案：

本说明书一个或多个实施例提供了一种人脸关键点处理方法，针对同一人脸连续采集了多帧人脸图像，方法包括：

将当前帧的人脸图像输入预先训练的人脸关键点模型，预测得到多个预设区域的人脸基础关键点，并预测得到所述多个预设区域中的指定区域的人脸补充关键点；

确定根据当前帧之前的各帧人脸图像更新得到的人脸基础关键点集合和人脸补充关键点集合，所述人脸基础关键点集合和所述人脸补充关键点集合用于进行图像处理；

根据分别为上一帧的人脸图像和当前帧的人脸图像预测的人脸基础关键点和人脸补充关键点，进行人脸运动检测；

根据所述人脸运动检测的结果，若确定所述指定区域发生了人脸运动，则根据为当前帧的人脸图像预测的人脸补充关键点，对所述人脸补充关键点集合进行更新，以便相应地更新所述图像处理。

本说明书一个或多个实施例提供了一种人脸关键点处理装置，针对同一人脸连续采集了多帧人脸图像，所述装置包括：

预测单元，将当前帧的人脸图像输入预先训练的人脸关键点模型，预测得到多个预设区域的人脸基础关键点，并预测得到所述多个预设区域中的指定区域的人脸补充关键点；

更新单元，确定根据当前帧之前的各帧人脸图像更新得到的人脸基础关键点集合和人脸补充关键点集合，所述人脸基础关键点集合和所述人脸补充关键点集合用于进行图像处理；

检测单元，根据分别为上一帧的人脸图像和当前帧的人脸图像预测的人脸基础关键点和人脸补充关键点，进行人脸运动检测；