[发明专利]一种基于3D人脸的眼镜匹配方法、装置及终端

说明书

本公开是关于一种基于3D人脸的眼镜匹配方法、装置及终端。该方法是在瞳孔坐标系中根据鼻部在人脸3D模型的范围，确定眼镜候选的安装点，并将人脸特征点数据和镜框镜脚3D模型的元数据按预设条件进行匹配筛选后再得到筛选的镜框镜脚，通过碰撞检测进行匹配优化，将确定的眼镜候选的安装点和筛选的镜框镜脚输入到碰撞盒进行碰撞检测，得到最终的安装点和镜框镜脚，根据所述得到的最终的安装点和镜框镜脚确定匹配的眼镜。本公开的方案不仅仅考虑了视觉佩戴效果，还考虑眼镜是否与人脸匹配的因素，从而能提高眼镜匹配的精确性。

技术领域

本公开涉及计算机及人脸3D技术领域，尤其涉及一种基于3D人脸的眼镜匹配方法、装置及终端。

背景技术

随着信息技术与互联网技术的不断发展，眼镜市场消费也不断升级，眼镜试戴系统也从最初的泛娱乐型产品到仿真的工业系统升级。所谓眼镜试戴，是指利用人脸识别等图像处理技术，将眼镜图片或者模型与人脸进行恰当的融合，给人一种眼镜是戴在人脸上的视觉效果。

相关技术中，大部分是利用二维图像处理技术的眼镜匹配方法，例如基于拍摄或者上传的二维头像图片信息，再将眼镜合成到头像图片上，将图片设置为背景图片，通过眼镜识别算法获取眼镜佩戴的位置，然后把眼镜图贴到背景图片合适的位置，该方法可以得到一个角度的试戴效果。

但是，基于目前眼镜试戴系统的升级要求，对眼镜试戴的科学性和严谨性带来了新的挑战，不仅仅只满足一定的视觉佩戴效果，还需要从科学性以及严谨性等多个角度，考虑眼镜是否与人脸精确匹配，相关技术中还未出现匹配效果较精确的眼镜匹配方法。

发明内容

为克服相关技术中存在的问题，本公开提供一种基于3D人脸的眼镜匹配方法、装置及终端，能提高眼镜匹配的精确性。

根据本公开实施例的第一方面，提供一种基于3D人脸的眼镜匹配方法，包括：

分别获取人脸3D模型及其元数据、镜框镜脚3D模型及其元数据；根据所述人脸3D模型的元数据中的人脸特征点数据构造瞳孔坐标系，在所述瞳孔坐标系中根据鼻部在所述人脸3D模型的范围，确定眼镜候选的安装点；将所述人脸特征点数据和所述镜框镜脚3D模型的元数据按预设条件进行匹配筛选，确定筛选的镜框镜脚；将所述确定的眼镜候选的安装点和筛选的镜框镜脚输入到碰撞盒进行碰撞检测，得到最终的安装点和镜框镜脚；根据所述得到的最终的安装点和镜框镜脚确定匹配的眼镜。

其中，所述根据所述人脸3D模型的元数据中的人脸特征点数据构造瞳孔坐标系，包括：

将瞳孔连线的中点设为瞳孔坐标系原点O(x，y，z)，将人脸3D模型左瞳孔穿过原点连接到右瞳孔，构成X轴，将左右耳朵特征点连线的中点连接原点并穿过原点，构成Y轴，其中Z轴由X轴叉乘Y轴得到。

其中，所述在所述瞳孔坐标系中根据鼻部在所述人脸3D模型的范围，确定眼镜候选的安装点，包括：

在所述瞳孔坐标系中，选取设定点向所述人脸3D模型中的鼻梁作光线投射，确定眼镜候选的安装点。

其中，所述在所述瞳孔坐标系中，选取设定点向所述人脸3D模型中的鼻梁作光线投射，确定眼镜候选的安装点，包括：

在所述瞳孔坐标系中，在Z轴选取第一设定数目点，在Y轴选择第二设定数目点，在X轴取一个固定值，得到YZ平面上的第三设定数目点作为光线投射的起点；

从所述起点向所述人脸3D模型的鼻梁部分作光线投射，其中光线投射与鼻梁的两个交叉点的中点为安装点。

其中，所述将所述人脸特征点数据和所述镜框镜脚3D模型的元数据按预设条件进行匹配筛选，包括：

将所述人脸特征点数据中的脸宽、耳朵、瞳孔与所述镜框镜脚3D模型的元数据中的镜框宽度、镜脚长度、镜片光心按以下预设条件进行匹配筛选，