[发明专利]图像处理方法、图像处理装置和计算机可读存储介质

说明书

本申请提供一种图像处理方法、图像处理装置和计算机可读存储介质。本申请的技术方案中，先获取待处理图像中的人脸图像的目标特征点集合，基于该目标特征点集合以及人脸姿态参数模型、三维可变性人脸模型得到三维人脸模型，然后根据目标姿态参数对三维人脸模型进行姿态调整，最后将调整后的三维人脸模型转换为正面人脸图像。本申请的技术方案中，对待处理图像的特征点进行两次检测和一次非极大值抑制，可以得到较为准确的目标人脸特征点集合。另外，三维人脸模型可以更好的反映人脸的本质特征，直接对三维人脸模型进行调整然后再将其投影成为正面图像，可以提高正面图像的重建质量。

技术领域

本申请涉及图像处理领域，尤其涉及图像处理方法、图像处理装置和计算机可读存储介质。

背景技术

随着线上非接触式对客服务模式的兴起，视频客服逐渐成为重要的对客服务渠道之一。在客服端与客户端进行线上视频的过程中，客服端采集到的客服的眼神和脸部角度都可能发生偏移，客服面对镜头时也难以长期维持正脸姿态，从而导致客服端采集到的是客服的非正面人脸图像。因此，需要对客服端采集的人脸图像进行调整，以使得客户端显示的客服人脸图像始终是正面人脸图像。非正面人脸图像简称为非正脸图像，正面人脸图像简称为正脸图像。

一种将非正脸图像调整为正脸图像的方法如下：先检测图像中是否包含非正脸图像；若该图像中包含非正脸图像，则将该非正脸图像输入到预先训练好的三维(3dimension，3D)重建参数提取模型中，得到该非正脸图像的3D重建参数；获取现有模型中的平均脸及该平均脸的基准向量(该平均脸是正面人脸的平均脸)，根据3D重建参数和平均脸的基准向量计算调整参数，然后根据调整参数对平均脸进行调整，得到正面人脸图像。

该方法中，检测人脸图像是对人脸图像的特征点进行检测，在检测特征点时，可以对图像中的一个或多个特征点进行检测，当对一个特征点进行检测时，很容易出现该特征点检测有误的情况，例如，将一个类似于鼻子的特征点检测成鼻子的特征点。另外，根据调整参数对平均脸进行角度方面的调整时，是根据非正面图像的3D重建参数和平均脸的基准向量之间的角度差进行调整的，而实际上该非正面图像只是该3D人脸在空间上某一平面上的投影，该非正面图像表示人脸表面的特性，并不能完全反应人脸的本质属性，它反映出来的人脸特征会与实际的人脸特征有一定的偏差，进而影响重建正面图像的准确度。

发明内容

本申请提供一种图像处理方法和图像处理装置，用以解决在将非正面人脸图像重建为正面人脸图像过程中，正面人脸图像重建准确度不高的问题。

第一方面，本申请提供一种图像处理方法，该方法包括：获取待处理图像中的人脸图像的目标特征点集合；根据所述目标特征点集合和人脸姿态参数估计模型获取所述人脸图像的目标姿态参数，所述人脸姿态参数估计模型用于基于人脸特征点集合输出人脸姿态参数；根据所述人脸图像和三维可变性人脸模型获取所述人脸图像的三维人脸模型；根据所述目标姿态参数对所述三维人脸模型进行调整，得到所述人脸图像的目标三维人脸模型；将所述目标三维人脸模型转换为二维人脸图像，得到所述人脸图像的正面人脸图像。

直接对目标人脸特征点集合得到的三维人脸模型进行姿态调整，从而得到目标三维人脸模型，该目标三维人脸模型可以更准确地反映人脸的本质属性，即更接近于实际人脸，所以根据该目标三维人脸模型进行矩阵变换得到的正面人脸图像也更接近于实际的正面人脸。

本方法中，所述获取待处理图像中的人脸图像的目标特征点集合，包括：获取所述待处理图像的色调值；根据所述待处理图像的色调值获取所述待处理图像中的人脸图像的目标人脸特征点集合。

获取所述待处理图像的色调值指的是先将图像由RGB格式转换成HSV格式,然后提取HSV格式的图像的色调值，可以有效降低图像的深浅和图像的明暗对图像色彩的影响，即可以提高对提取颜色特征的准确度，进而可以得到更准确的人脸初始点模型。