[发明专利]一种识别图像中出现的唇妆产品的方法

说明书

本发明公开了一种从图像中识别唇妆产品的方法，该方法包括：检测图像上的嘴巴，确定嘴巴是否化妆，以及如果人的嘴巴是化妆的，从属于嘴巴的图像的至少一些像素中确定图像唇妆的颜色参数，计算来自图像的唇妆的颜色参数与多个参考唇妆产品中的至少一些的颜色参数之间的距离，以及如果输入图像的唇妆的颜色参数与参考唇妆产品之一之间的至少一个距离低于预定阈值，则识别为参考唇妆产品与图像上的唇妆产品最匹配。

技术领域

本发明涉及一种用于从输入图像中识别唇妆产品以推荐相应唇妆产品的方法和系统。

背景技术

当客户愿意选择唇妆产品时，可能很难从散装产品的颜色或产品包装上显示的颜色来确定产品涂抹在唇部后的效果。事实上，一旦涂抹在皮肤上，产品的颜色和质地可能会有所不同。

相反，当人们看到一个人带着唇妆产品的图像时，一旦将唇妆产品涂抹在嘴唇上，该人很容易看到唇妆产品的外观。如果唇妆产品符合这个人的喜好，他或她可能愿意找到相应的唇妆产品并购买。然而，由于上述产品在唇部的外观与散装产品或其包装的外观之间的差异，找到匹配的产品可能并不容易。

因此，需要一种用于从图像确定唇妆产品的解决方案。

已经提出了用于基于用户的肤色确定适合用户的粉底的解决方案。然而，这些解决方案不适用于唇妆产品的选择，因为唇妆产品在嘴唇上的分析更复杂，而且口红在质地方面具有不适用于粉底的特殊性。

从EP 3 447 726中还已知一种图像分析方法，其中获取口红的颜色并将其与参考颜色进行比较，但是执行该分析仅是为了帮助人化妆。

因此，以上公开的方法都没有提供对该问题的解决方案。

发明内容

本发明的目的是通过提供一种自动识别唇妆产品的方法来克服现有技术的缺点。特别地，本发明的目的是在参考唇妆产品的数据库中识别与图像上可见的唇妆产品最佳对应的产品。

本发明的另一个目的是确保所选择的参考产品不仅与图像上可见的唇妆产品最接近匹配，而且与所述唇妆产品足够相似以与顾客相关。

为此，公开了一种用于从输入图像识别唇妆产品的方法，该方法由系统实施，该系统包括计算机和存储器，用于存储多个参考唇妆产品中的每一个，标识符和颜色参数，该方法包括：

-检测输入图像上的人的嘴巴，

-确定嘴巴是否化妆，以及

-如果人的嘴巴是化妆的，

o从属于嘴巴的图像的至少一些像素中确定输入图像的唇妆的颜色参数，

o计算来自图像的唇妆的颜色参数与多个参考唇妆产品中的至少一些的颜色参数之间的距离，以及

o如果输入图像的唇妆的颜色参数与参考唇妆产品之一之间的至少一个距离低于预定阈值，则识别参考唇妆产品与图像上的唇妆产品最匹配。

在实施例中，确定嘴巴是否化妆包括实施在多个嘴部图像上训练并被配置为确定唇部化妆产品的存在或不存在的二元分类模型。

在实施例中，识别与图像上的唇妆产品最匹配的参考唇妆产品包括实施在学习数据集上训练的分类模型，该学习数据集包括对于每个参考唇妆产品，佩戴所述参考唇妆产品的多个人工生成的面部图像。

在实施例中，该方法还包括确定图像的唇妆产品的质地，以及计算图像的唇妆产品的颜色参数与参考唇妆的颜色参数之间的距离的步骤，该步骤仅针对与图像的唇妆产品具有相同质地的参考唇妆产品执行。

在这种情况下，确定唇妆产品的质地和确定图像上的嘴巴是否化妆的步骤可以通过实施训练模型同时执行，该模型被配置为从表示面部的输入图像输出从多个类别中选择的类别，包括没有唇妆产品和多个唇妆产品的质地。