[发明专利]一种广告推荐方法及装置

权利要求书

1.一种广告推荐方法，其特征在于，包括：

采集设定广告时间段内观看广告的观众的视频帧图像；

针对每一视频帧图像，获取所述视频帧图像中的人脸图像；

根据所述人脸图像确定所述视频帧图像中对应观众的状态信息，所述状态信息包括性别、年龄、表情、人眼睁闭状态以及人脸旋转角度；通过以下方式确定所述视频帧图像中对应观众的人脸旋转角度：根据人脸关键点位置坐标与预设的标准正脸的人脸关键点位置坐标确定人脸旋转角度，所述关键点位置坐标至少包括：左眼位置坐标、右眼位置坐标以及鼻子位置坐标；

根据人脸关键点位置坐标与预设的标准正脸的人脸关键点位置坐标确定人脸旋转角度，具体包括：根据所述人脸的鼻子位置坐标和所述标准正脸的左眼位置坐标确定所述标准正脸的左眼与所述人脸的鼻子之间的垂直距离；根据所述人脸的鼻子位置坐标和所述标准正脸的右眼位置坐标确定所述标准正脸的右眼与所述人脸的鼻子之间的垂直距离；确定所述标准正脸的左眼与所述标准正脸的右眼在X轴方向的间距；根据所述标准正脸的左眼与所述人脸的鼻子之间的垂直距离、所述标准正脸的右眼与所述人脸的鼻子之间的垂直距离，确定所述人脸的旋转方向，并根据所述标准正脸的左眼与所述人脸的鼻子之间的垂直距离、所述标准正脸的左眼与所述标准正脸的右眼在X轴方向的间距，确定所述人脸的旋转角度；

根据所述人眼睁闭状态和所述人脸旋转角度判断所述人脸图像对应的观众的注意力是否集中，具体包括：如果所述人眼睁闭状态为睁眼，且所述人脸旋转角度在预设角度范围之内时，则判定所述人脸图像对应的观众的注意力集中；如果所述人眼睁闭状态为闭眼，或者所述人脸旋转角度不在所述预设角度范围之内时，则判定所述人脸图像对应的观众的注意力不集中；

根据各视频帧图像中各观众的状态信息和所述各观众的观看时长确定对所述广告感兴趣的观众类型，具体包括：统计所述视频帧图像中观看时长大于预设时长、且注意力集中以及表情为微笑状态的视频帧图像的帧数大于预设数量的观众；将统计出的所述观众的年龄和性别确定为对所述广告感兴趣的观众类型；

在所述广告时间段向所述类型的观众自动推荐所述广告。

2.如权利要求1所述的方法，其特征在于，获取所述视频帧图像中的人脸图像，具体包括：

根据预设的人脸检测模型提取所述视频帧图像中的人脸位置坐标，所述人脸位置坐标包括人脸关键点位置坐标；

根据所述人脸位置坐标截取人脸图像。

3.如权利要求2所述的方法，其特征在于，根据所述人脸图像确定所述视频帧图像中对应观众的状态信息，具体包括：

将所述人脸图像输入到预设的性别分类模型，获取所述人脸图像对应的观众的性别；以及

将所述人脸图像输入到预设的年龄分类模型，获取所述人脸图像对应的观众的年龄；以及

将所述人脸图像输入到预设的表情分类模型，获取所述人脸图像对应的观众的表情；以及

从所述人脸关键点位置坐标中提取所述人眼位置坐标，根据所述人眼位置坐标提取人眼图像，将所述人眼图像输入到预设的人眼分类模型，获取所述人脸图像对应的观众的人眼睁闭状态。