[发明专利]一种人脸上妆方法、装置、设备及介质

权利要求书

1.一种人脸上妆方法，其特征在于，包括：

对获取到的人脸图像进行人脸关键点检测，得到人脸关键点检测结果，基于所述人脸关键点检测结果对所述人脸图像中的预设部位进行上妆，得到上妆后的人脸图像；

对所述人脸图像进行语义分割，得到语义分割结果，基于所述语义分割结果确定所述人脸图像中未被遮挡的人脸区域；

确定所述上妆后的人脸图像中的上妆区域、与所述人脸图像中未被遮挡的人脸区域之间的第一重叠区域，保留所述第一重叠区域中的上妆效果；所述上妆区域为所述上妆后的人脸图像中包含上妆效果的区域；

基于所述人脸图像中未被遮挡的人脸区域，确定所述人脸图像中被遮挡的人脸区域，并确定所述上妆区域与所述被遮挡的人脸区域之间的第二重叠区域，去除所述第二重叠区域中的上妆效果，得到人脸上妆图像。

2.根据权利要求1所述的方法，其特征在于，所述对所述人脸图像进行语义分割，得到语义分割结果，基于所述语义分割结果确定所述人脸图像中未被遮挡的人脸区域，包括：

将所述人脸图像输入预先训练的语义分割模型，根据所述语义分割模型的输出结果，确定所述人脸图像中未被遮挡的人脸区域，所述未被遮挡的人脸区域为所述人脸图像中除遮挡物区域和背景区域之外的区域。

3.根据权利要求2所述的方法，其特征在于，所述预先训练的语义分割模型采用以下步骤训练生成：

获取多个训练样本图像；

以所述多个训练样本图像中的每个训练样本图像作为输入，将所述每个训练样本图像对应输出的语义分割结果与所述训练样本图像的标注结果做比对，基于所述每个训练样本图像对应输出的语义分割结果与所述训练样本图像的标注结果的差异训练生成所述语义分割模型，所述每个训练样本图像对应的语义分割结果为表征所述每个训练样本图像中未被遮挡的人脸区域，所述标注结果是预先在所述训练样本图像中标注的语义分割结果。

4.根据权利要求1所述的方法，其特征在于，所述对获取到的人脸图像进行人脸关键点检测，得到人脸关键点检测结果，基于上述人脸关键点检测结果对所述人脸图像中的预设部位进行上妆，得到上妆后的人脸图像，包括：

对获取到的图像进行人脸检测，得到人脸区域，获取包含所述人脸区域、且区域面积大于所述人脸区域的区域图像作为人脸图像；

对所述人脸图像进行人脸关键点检测，确定所述人脸图像中的人脸关键点；

对所述人脸图像中包括所述人脸关键点的预设部位进行上妆。

5.根据权利要求1所述的方法，其特征在于，所述对所述人脸图像进行语义分割，得到语义分割结果，基于所述语义分割结果确定所述人脸图像中未被遮挡的人脸区域，包括：

基于所述人脸关键点检测结果对所述人脸图像进行人脸分割，得到人脸分割结果，基于所述人脸分割结果确定所述人脸图像中未被遮挡的人脸区域。

6.一种人脸上妆装置，其特征在于，包括：

处理单元，被配置为执行获取到的人脸图像进行人脸关键点检测，得到人脸关键点检测结果，基于所述人脸关键点检测结果对所述人脸图像中的预设部位进行上妆，得到上妆后的人脸图像；

确定单元，被配置为执行对所述人脸图像进行语义分割，得到语义分割结果，基于所述语义分割结果确定所述人脸图像中未被遮挡的人脸区域；

修正单元，被配置为执行确定所述上妆后的人脸图像中的上妆区域、与所述人脸图像中未被遮挡的人脸区域之间的第一重叠区域，保留所述第一重叠区域中的上妆效果；所述上妆区域为所述上妆后的人脸图像中包含上妆效果的区域；基于所述人脸图像中未被遮挡的人脸区域，确定所述人脸图像中被遮挡的人脸区域，并确定所述上妆区域与所述被遮挡的人脸区域之间的第二重叠区域，去除所述第二重叠区域中的上妆效果，得到人脸上妆图像。

7.根据权利要求6所述的装置，其特征在于，所述确定单元还被配置为：

将所述人脸图像输入预先训练的语义分割模型，根据所述语义分割模型的输出结果，确定所述人脸图像中未被遮挡的人脸区域，所述未被遮挡的人脸区域为所述人脸图像中除遮挡物区域和背景区域之外的区域。