[发明专利]基于视频视线识别对电梯媒体收视信息进行采集的方法

权利要求书

1.一种基于视频视线识别对电梯媒体收视信息进行采集的方法，其特征在于，所述方法包括：

利用电梯门上安装的视频监控设备进行视频图像采集，并将视频图像传输到智能设备中进行视线特征识别，识别出人像数量，每个人像矩形位置大小、年龄、性别、双眼视线空间坐标、双眼视线空间向量；所述电梯门上安装的视频监控设备，对电梯门正面区域进行拍摄，能够有效的拍摄到电梯门外等候人群和/或电梯轿厢门内乘梯人群的正面平视人脸图像，便于进行视线特征识别；

利用视线特征参数及监控设备安装参数进行空间计算，利用计算出的水平距离过滤掉无效视线特征，具体为：利用设定好的不同人像特征参数对应的人脸平均高度表，反查出当前人像对应的真实高度，结合当前人像在图像中的像素位置和大小，估算出当前人像空间位置和摄像头安装位置的水平距离，从而排除小于可信距离或者大于可信距离的无效人像；所述监控设备安装参数包含摄像头镜头高度、镜头水平位置、镜头像素分辨率大小、镜头可视水平视角及垂直视角；

利用有效视线特征参数及媒体播放设备安装参数进行可视区域空间碰撞计算，统计出各可视区域当前播放内容的视线关注量；所述媒体播放设备安装参数包含播放设备可视区域长宽尺寸、可视区域分辨率大小、设备安装垂直高度、设备安装水平位置；

所述可视区域空间碰撞计算，是将识别到的人像视线空间矢量进行空间射线延长，与媒体播放设备空间位置进行相交计算，如果射线穿过可视区域在空间位置中的面，则将射线与面相交的点空间坐标转化为面中的平面坐标后记录下来，具体为：以摄像头安装位置为空间原点坐标，利用推算出的人像水平距离，推算双眼视线空间坐标；以摄像头安装位置为空间原点坐标，利用媒体播放设备安装参数，推算屏幕当前播放媒体内容各可视区域空间坐标；利用双眼视线空间向量，计算向量延长射线与可视区域空间点面相交坐标，并将相交空间坐标转换为媒体播放设备屏幕平面坐标，并和当前播放视频媒体内容及时间轴数据一起作为媒体收视信息进行采集；

已知单眼在空间中，以摄像头为空间原点的坐标为：(ed,ed,d)，其中ed为单眼在空间中面向摄像头的平面上以摄像头映射位置为中心点的水平位置，eh为单眼在空间中与摄像头的高度差，d为当前人像距离摄像头水平位置，则其映射到摄像头所在平面，以摄像头中心为平面原点的平面坐标为：(ed,ed)，又已知单眼在空间x轴和y轴上的视线向量为：(pitch,yaw)，则单眼在摄像头所在平面的视线落点与单眼在摄像头所在平面的垂直落点之间的水平偏差距离计算公式为：

sd＝tan(yaw)×d

单眼在摄像头所在平面的视线落点与单眼在摄像头所在平面的垂直落点之间的垂直偏差距离计算公式为：

sh＝tan(pitch)×d

则单眼视线落点在摄像头所在平面的坐标为：(ed+sd,eh+sh)；

已知摄像头中心位置与显示设备屏幕安装位置左上角水平与垂直距离分别为hd、vd，以及显示设备屏幕实际长宽尺寸s_w、s_h，以及显示设备屏幕分辨率s_width、s_height，则视线落点在显示设备屏幕上的水平像素坐标计算公式为：

视线落点在显示设备屏幕上的垂直像素坐标计算公式为：

根据当前播放内容视线关注量控制媒体播放设备播放特定媒体内容，具体为：对当前播放内容制作图像区域与待播媒体内容的对应关系表；对当前视线特征识别结果中不同图像区域的视线关注量进行统计排序；依据排序结果，查表获得图像区域对应的待播媒体内容，控制媒体播放设备播放该特定媒体内容。