[发明专利]基于注视点识别的广告展示方法、装置、设备及存储介质

说明书

本申请实施例属于人工智能领域，涉及一种基于注视点识别的广告展示方法、装置、计算机设备及存储介质，其中方法包括：获取广告展示屏前的观察者的人眼图像；将所述人眼图像进行瞳孔检测，获得所述人眼图像中瞳孔的坐标；将所述人眼图像进行普尔钦斑检测，获得所述人眼图像中普尔钦斑的坐标；根据所述瞳孔的坐标和所述普尔钦斑的坐标，计算瞳孔和所述普尔钦斑的二维偏移向量；将所述二维偏移向量输入到预先训练的二维偏移向量‑注视点映射模型进行注视点映射，得到所述观察者在所述广告展示屏上的注视点；根据所述注视点展示广告。根据观察者的注视点有针对性的展示广告，使广告投放契合观察者的兴趣点，提升了广告投放的效果。

技术领域

本申请涉及人工智能技术领域，尤其涉及基于注视点识别的广告展示方法、装置、设备及存储介质。

背景技术

现在多媒体广告是广告投放的主要形式，在机场、车站、地铁、商场、电梯等都设置有大量的多媒体广告屏，但是这种设置于公共场所的广告屏往往都是单向的广告展示，对广告观察者的注视行为没有响应和互动，广告形式单一，大部分人可能都没有注意到这些广告，使广告投放的效率低、广告推广效果不佳。

发明内容

本申请实施例的目的在于提出一种基于注视点识别的广告展示方法、装置、计算机设备及存储介质，以解决多媒体广告单向播放，形式单一，投放效率低，推广效果不佳的问题。

为了解决上述技术问题，本申请实施例提供一种基于注视点识别的广告展示方法，采用了如下所述的技术方案：

获取广告展示屏前的观察者的人眼图像；

将所述人眼图像输入到预先训练的第一目标检测模型中进行瞳孔检测，获得所述人眼图像中瞳孔的坐标；

将所述人眼图像输入到预先训练的第二目标检测模型中进行普尔钦斑检测，获得所述人眼图像中普尔钦斑的坐标；

根据所述瞳孔的坐标和所述普尔钦斑的坐标，计算瞳孔和所述普尔钦斑的二维偏移向量；

将所述二维偏移向量输入到预先训练的二维偏移向量-注视点映射模型进行注视点映射，得到所述观察者在所述广告展示屏上的注视点；

根据所述注视点展示广告。

进一步的，在所述将所述人眼图像输入到预先训练的第一目标检测模型中进行瞳孔检测，获得所述人眼图像中瞳孔的坐标的步骤之前，还包括：

获取第一训练样本，所述第一训练样本为包含N个标注了瞳孔真实框的人眼图像；

将所述第一训练样本输入到预训练的第一目标检测模型中，获得所述第一目标检测模型响应所述第一训练样本输出的瞳孔预测框；

通过第一损失函数比对所述瞳孔预测框和所述瞳孔真实框是否一致；

调整所述第一目标检测模型各节点的参数，至所述第一损失函数达到最小值时结束，得到训练好的第一目标检测模型。

进一步的，在所述将所述二维偏移向量输入到预先训练的二维偏移向量-注视点映射模型进行注视点映射，得到所述观察者在所述广告展示屏上的注视点的步骤之前，还包括：

获取第二训练样本，所述第二训练样本包含N个二维偏移向量样本，其中每个二维偏移向量样本标注有参考注视点坐标；

将所述第二训练样本输入到预训练的二维偏移向量-注视点映射模型进行注视点映射，得到所述二维偏移向量-注视点映射模型输出的N个预测注视点坐标；

通过第二损失函数比较每个所述预测注视点坐标与对应的参考注视点坐标是否一致；

调整所述二维偏移向量-注视点映射模型各节点的参数，至所述第二损失函数达到最小值时结束，得到训练好的二维偏移向量-注视点映射模型。