[发明专利]用于视线校正的设备和方法

权利要求书

1.一种用于校正用户的视线的用户设备，包括：

输入端，其被配置为从相机接收所述用户的脸的视频；

脸部跟踪模块，其被配置为在活动跟踪模式中跟踪所述用户的脸的至少一个角坐标，并且输出在可能值的范围内的所述至少一个角坐标的当前值；以及

视线校正模块，其被配置为仅当所述脸部跟踪模块处于所述活动跟踪模式中并且所述当前值在所述用户的脸朝向所述相机的可能值的范围的受限子范围内时，修改所述视频的帧以校正所述用户的所述视线，由此所述用户在经修改的帧中被感知为直接看着所述相机。

2.根据权利要求1所述的用户设备，其中，所述脸部跟踪模块还被配置为跟踪所述用户的脸的至少一个空间坐标并且输出每个在可能值的相应范围内的所跟踪的坐标的当前值；并且

其中，仅当所述脸部跟踪模块处于所述活动跟踪模式中并且所述当前值每个在所述用户的脸朝向所述相机并且在受限空间区域内的可能值的相应范围的相应受限子范围内时，修改所述帧。

3.根据权利要求2所述的用户设备，其中，所述至少一个空间坐标包括所述用户的脸的至少两个或至少三个空间坐标。

4.根据权利要求1所述的用户设备，其中，所述脸部跟踪模块被配置为跟踪所述用户的脸的至少两个角坐标并且输出每个在可能值的相应范围内的所跟踪的至少两个角坐标的当前值；并且

其中，仅当所述跟踪模块处于所述活动跟踪模式中并且所述当前值每个在所述用户的脸朝向所述相机的可能值的所述相应范围的相应受限子范围内时，修改所述帧。

5.根据权利要求4所述的用户设备，其中，所述至少两个角坐标包括所述用户的脸的至少三个角坐标。

6.根据权利要求1所述的用户设备，其中，所述脸部跟踪模块被配置为跟踪所述用户的脸的至少一个空间坐标，并且所述用户设备包括限制设置模块，所述限制设置模块被配置为基于对所述至少一个空间坐标的跟踪来改变所述至少一个角坐标的所述受限子范围。

7.根据权利要求1所述的用户设备，其中，所述用户设备包括显示器和限制设置模块，所述限制设置模块被配置为基于指示所述显示器的当前状态的显示数据来改变所述至少一个角坐标的所述受限子范围。

8.根据权利要求7所述的用户设备，包括网络接口，所述网络接口被配置为接收在所述显示器上显示的另一用户的远端视频，并且基于所述远端视频的显示的当前显示参数来改变所述至少一个角坐标的所述受限子范围。

9.根据权利要求8所述的用户设备，其中，所述至少一个角坐标的受限子范围是基于由所述远端视频在所述显示器上占据的当前位置和/或当前区域来改变的。

10.根据权利要求1所述的用户设备，包括保存一个或多个模板的计算机存储，其中每个模板包括直接看着所述相机的所述用户的眼睛的图像，其中，通过用相应的模板替换所述用户的眼睛中的每个眼睛来校正所述视线。

11.根据权利要求10所述的用户设备，其中，所述一个或多个模板中的每个模板包括直接看着所述相机的所述用户的眼睛的图像以及围绕所述眼睛的所述用户的脸的至少部分，其中，所述视线校正模块被配置为将这些部分与所述帧的对应部分混合。

12.根据权利要求10所述的用户设备，包括模板修改模块，所述模板修改模块被配置为修改所述模板以便修改所述眼睛的视觉外观。

13.根据权利要求12所述的用户设备，其中，所述模板修改模块被配置为修改所述模板以：改变虹膜颜色、校正所述眼睛的不对称性、和/或使所述眼睛变白。