[发明专利]一种基于视觉获取行人的消费肖像的方法及装置

说明书

本发明提供了一种基于视觉获取行人的消费肖像的方法及装置，该获取行人的消费肖像的方法及装置以提取的人体姿势关键点信息来对行人头部、上身、腿部、脚部图像进行解构分析得到人脸属性集、上身属性集、腿部属性集、脚部属性集，并融合四个属性集得到该行人的消费肖像；这种根据行人的外貌来获取行人消费肖像的技术弥补了线下广告无针对性的缺点，可以获取行人的消费肖像后就近传输给线下广告设备以提高其广告的获客率。

技术领域

本发明涉及视频识别领域，特别涉及一种根据行人的外貌、衣着特征获取行人消费肖像的方法及装置。

背景技术

随着AI技术的进步现今的机器学习算法已经能够以极高的准确率实现：人体姿态关键点检测、

随着AI技术的进步，先进的机器学习模型针对包含行人的图片已经能够以极高的准确率实现诸如：人体姿态关键点检测、人脸属性识别、服饰分割、以待检索图片对预存的图片库进行视觉搜索等功能；这些功能既可以用本地的设备来进行训练并应用，也可以通过远程调用AI算力服务商的API来实现；包含阿里云AI在内的提供商已经可以在线提供包含上述功能在内的API调用，从而极大的方便了在终端以远程调用的方式实现AI算力的整合，正是基于上述成熟基础技术条件，本发明实现了一种基于视觉获取行人的消费肖像的方法及装置，在获得行人的消费肖像之后可以就近传输至线下广告设备，线下广告设备可以依据行人的消费肖像为其提供较为合适的产品广告推荐内容。

发明内容

一种基于视觉获取行人的消费肖像的方法，其特征在于，包含以下步骤：

对监控摄像头采集到的视频流进行移动监测得到移动点、并耦合移动点得到至少一个独立移动图块；

从所述独立移动图块中选取面积最大的独立移动图块为目标图块，并对目标图块作人体姿势关键点检测；

根据检测得到的人体姿势关键点信息：

(1)从与行人头部对应的鼻子、左眼、右眼、左耳、右耳、颈部关键点中选取至少三点所构成的面积最大的凸多边形的各边向外延展第一预设冗余长度来从当前帧图像中截取该行人的头部截图;

(2)从与行人上身对应的颈部、左肩、右肩、左肘、右肘、左腕、右腕、左腰、右腰关键点中选取至少三点所构成的面积最大的凸多边形的各边向外延展第二预设冗余长度来从当前帧图像中截取该行人的上身截图；

(3)从与行人腿部对应的左腰、右腰、左膝、右膝、左踝、右踝关键点中选取至少三点所构成的面积最大的凸多边形的各边向外延展第三预设冗余长度来从当前帧图像中截取该行人的腿部截图；

(4)以与行人脚部对应的左踝后和右踝两关键点的连线线段中点作为圆心、左踝和右踝两关键点之间的距离作为半径来从当前帧图像中截取一个圆心的该行人的脚部截图；

对所述头部截图进行人脸属性识别得到包含了行人的性别、所属年龄阶段、是/否佩戴眼镜、是/否笑的信息在内的人脸属性集；

分别对所述上身截图、腿部截图、脚部截图进行服饰分割得到目标上身服饰图、目标腿部服饰图、目标脚部服饰图；

不分先后顺序地：

(1)以目标上身服饰图来对上身服饰图库进行视觉搜索，选取上身服饰图库中与目标上身服饰图的相似程度值大于预设相似程度阈值的上身服饰近似图，并以各上身服饰近似图的图片ID与其对应的相似程度值关联组成上身图片ID-相似程度值数据对，由所有的上身图片ID-相似程度值数据对构成上身匹配数据集；

(2)以目标腿部服饰图来对腿部服饰图库进行视觉搜索，选取腿部服饰图库中与目标腿部服饰图的相似程度值大于预设相似程度阈值的腿部服饰近似图，并以各腿部服饰近似图的图片ID与其对应的相似程度值关联组成腿部图片ID-相似程度值数据对，由所有的腿部图片ID-相似程度值数据对构成腿部匹配数据集；