[发明专利]视频会议的水平凝视估计

权利要求书

1.一种方法，包括：

利用至少第一视频相机观看至少第一人并从其产生视频信号；

在所述视频信号中检测和跟踪所述第一人的头部区域；

在所述视频信号中检测和跟踪所述头部区域内的子区域的尺寸和位置；以及

根据所述子区域在所述头部区域内的相对位置来计算所述第一人的水平凝视的估计。

2.如权利要求1所述的方法，其中，观看包括利用相对于多个视频显示区块定位的、被布置成面向所述第一人的所述第一视频相机来观看所述第一人，并且所述方法还包括在所述多个视频显示区块中的相应视频显示区块上显示多个人中的每一个的视频图像；以及根据所述第一人的水平凝视的估计来确定所述第一人正在看向所述多个人中的哪个。

3.如权利要求1所述的方法，其中，观看还包括利用所述第一视频相机或另外的视频相机观看多个人，并且所述方法还包括根据所述第一人的水平凝视的估计来确定所述第一人正在看向所述多个其他人中的哪个。

4.如权利要求1所述的方法，其中，检测和跟踪所述头部区域包括生成表示所述第一人的头部区域的第一矩形的数据，并且检测和跟踪所述子区域包括生成所述第一矩形内的第二矩形的尺寸和位置的数据，其中所述第二矩形包括所述第一人的耳、鼻和嘴。

5.如权利要求4所述的方法，其中，计算所述水平凝视的估计包括计算所述第一矩形和所述第二矩形各自的水平中心之间的距离d，以及所述第一矩形的半径r，并且计算水平凝视角度为arcsin(d/r)。

6.如权利要求1所述的方法，其中，观看包括在第一位置处利用所述第一视频相机观看包括所述第一人的第一组人并且在第二位置处利用至少第二视频相机观看第二组人，并且所述方法还包括在所述第一位置处基于由所述第二视频相机输出的视频信号在各个视频显示区块上显示所述第二组人中的各个人的视频图像并且在所述第二位置处基于由所述第一视频相机输出的视频信号在各个视频显示区块上显示所述第一组人中的各个人的视频图像。

7.如权利要求6所述的方法，其中，计算包括计算相对于所述第一组人中的另一人的所述第一人的水平凝视的估计。

8.如权利要求6所述的方法，其中，计算包括计算相对于示出所述第二组人中的人的视频图像的视频显示区块的所述第一人的水平凝视的估计。

9.如权利要求1所述的方法，其中，计算包括在每个时间步阶：计算表示所述头部区域内的所述子区域的尺寸和位置的随机样本粒子分布；计算所述子区域的至少一个图像分析特征；基于所述至少一个图像分析特征计算所提议的粒子分布的重要性权重；通过强调具有高重要性权重的样本粒子分布的成分并且不强调具有低重要性权重的样本粒子分布的成分来计算新的样本粒子分布。

10.如权利要求9所述的方法，还包括计算所述头部区域内的所述子区域的尺寸和位置的更新后估计为所述新的样本粒子分布的加权平均。

11.如权利要求9所述的方法，还包括基于所述新的样本粒子分布的具有最高重要性权重的成分的加权平均来计算所述头部区域内的所述子区域的尺寸和位置的更新后估计。

12.如权利要求1所述的方法，其中，检测所述头部区域、检测所述子区域和计算是相对于多个人中的每一个执行的，以便根据所述多个人中的每一个的水平凝视来计算共同视野，并且所述方法还包括选择包含确定所述共同视野所朝向的特定人的图像的视频信号。

13.如权利要求1所述的方法，其中，检测所述头部区域、检测所述子区域和计算是相对于多个人中的每一个执行的，以便根据所述多个人中的每一个的水平凝视来计算共同视野，并且所述方法还包括在显示器的一个区块上显示说话的人的图像并且在所述显示器的另一区块中显示确定所述共同视野所朝向的人的图像。

14.如权利要求1所述的方法，还包括处理所述第一人的视频图像以人为地调整所述第一人的眼球方向。

15.如权利要求1所述的方法，还包括基于所述第一人的水平凝视来选择来自多个视频相机之一的信号用于输出到显示器。