[发明专利]使用机器学习对眼睛图像进行校正的方法以及机器学习的方法

权利要求书

1.一种用于计算装置上的图像增强的方法，所述方法包括：

接收描绘人脸的数字输入图像；

经由目光调整机器学习模型通过改变所述人脸上眼睛的目光方向从所述数字输入图像生成经目光调整的图像，其中所述目光调整机器学习模型包括基于多个学习图像对的预测器，所述多个学习图像对不同之处在于目光方向；以及

输出所述经目光调整的图像。

2.如权利要求1所述的方法，其中所述预测器是单层或多层神经网络。

3.如权利要求1所述的方法，其中所述预测器是至少一个决策树或决策树集合。

4.如权利要求1所述的方法，其中所述学习图像对之间的目光方向相差在5至20度的范围内的角度。

5.如权利要求1所述的方法，其中所述预测器生成取决于涉及眼睛的多个特性点的像素位置的固定位移矢量。

6.如权利要求1所述的方法，其中所述预测器基于包含同一人的视图的多个学习图像对。

7.如权利要求1所述的方法，其中对于所有的学习图像对，学习对中的每个图像中的目光方向的差异是相同的。

8.如权利要求1所述的方法，其中所述方法还包括从存储所述预测器的信息介质加载所述预测器，所述信息介质包括下列中的一者：硬盘、固态驱动器、闪存、光学盘、混合驱动器、随机存取存储器(RAM)、远程计算机系统和远程数据存储。

9.如权利要求1所述的方法，其中生成经目光调整的图像的步骤包含识别所述数字输入图像中的多个界标。

10.如权利要求9所述的方法，其中所述生成经目光调整的图像的步骤还包含基于所述多个界标生成二维位移矢量场，所述二维位移矢量场针对所述数字输入图像中的一个或更多个像素中的每个像素指示所述像素的位移矢量，以及根据所述二维位移矢量场，通过使所述数字输入图像中的所述一个或更多个像素移位来生成所述经目光调整的图像。

11.如权利要求1所述的方法，其中所述预测器通过下列步骤获得：

获得多个学习图像对，所述多个学习图像对在每个图像对中包含同一人的视图，所述学习图像对不同之处在于目光方向，并且其中对于所述学习图像对，学习对中的每个图像中的目光方向的差异是相同的；

确定所述学习图像对中的每个中的眼睛的位置；以及

根据所述预测器的预测，通过将对中的第一图像的每个像素的颜色分量取代成所述对中的所述第一图像的另一像素的颜色分量来确定用于对每个学习图像对产生调整位移矢量场的预测器，从而得到类似于所述对中的第二图像的图像。

12.如权利要求1所述的方法，其中所述数字输入图像是包含多个帧的视频流中的一个帧。

13.一种计算装置，所述计算装置包括：

逻辑机器；以及

存储机器，所述存储机器保存可由所述逻辑机器执行的指令，以便：

接收描绘人眼的数字输入图像；

经由目光调整机器学习模型通过改变所述人眼的表观目光方向从所述数字输入图像生成经目光调整的图像，其中所述目光调整机器学习模型包括基于多个学习图像对的预测器，所述多个学习图像对不同之处在于目光方向；以及

输出所述经目光调整的图像。

14.如权利要求13所述的计算装置，其中生成经目光调整的图像的步骤包含基于所述数字输入图像中识别的多个界标生成二维位移矢量场，所述二维位移矢量场针对所述数字输入图像中的一个或更多个像素中的每个像素指示所述像素的位移矢量，以及根据所述二维位移矢量场，通过使所述数字输入图像中的所述一个或更多个像素移位来生成所述经目光调整的图像。