[发明专利]应用于图像视频人脸皮肤纹理质感增强的方法及装置

说明书

本发明涉及一种应用于图像视频人脸皮肤纹理质感增强的方法及装置，所述方法包括确定图像纹理中人脸关键点信息；通过人脸预设信息提取模型，得到人脸预设信息；根据图像纹理和人脸关键点信息，计算图像纹理中人脸关键点之间的连接关系，根据连接关系将图像纹理中的人脸区域划分为多个三角区域；利用人脸预设信息，对多个三角区域进行像素处理，输出纹理增强的图像。本发明通过预先对真实人脸进行关键点检测以及皮肤纹理提取得到预设信息，进行人脸编辑时，通过对输入图像的人脸关键点进行识别，结合预设信息对预提取的皮肤纹理进行映射变形后与原人脸进行特定的混合，从而得到真实、细腻，具有自然形变的皮肤纹理增强效果的图像。

技术领域

本发明属于图像处理技术领域，具体涉及一种应用于图像视频人脸皮肤纹理质感增强的方法及装置。

背景技术

随着移动端处理能力的日益增强，以及图像视频编辑类应用的大规模普及，用户对于人像的编辑需求也愈发高涨，并且对美化效果的细腻程度以及真实性也有了更高要求。除去常规的剪辑、滤镜特效、五官调整、磨皮等美化外，也会需要对脸部皮肤的纹理细节进行美化和增强处理，提升人脸质感和整体气质。

相关技术中，用户在进行人像编辑时，有时为提升人像质感和整体效果，会需要对人脸的皮肤纹理进行增强。当前市面上具有的此类编辑功能的应用，只能通过叠加一张随机噪声纹理来实现，尽管噪声纹理的生成五花八门，混合的方式也各不相同。但都有以下缺陷：一方面增强后的纹理效果不够细腻和真实，无法完美还原真实人脸的皮肤质感；另一方面，在图像中人脸有拉伸形变或是人脸朝向发生改变时，噪声纹理无法随之产生自然的形变效果。

发明内容

有鉴于此，本发明的目的在于克服现有技术的不足，提供一种应用于图像视频人脸皮肤纹理质感增强的方法及装置，以解决现有技术中图像视频编辑对皮肤的纹理细节处理时存在不够真实自然的问题。

为实现以上目的，本发明采用如下技术方案：一种应用于图像视频人脸皮肤纹理质感增强的方法，包括：

获取视频流的图像纹理，确定所述图像纹理中人脸区域的人脸关键点信息；其中，所述人脸关键点信息至少包括：五官、脸部轮廓在图像中的二维坐标；

通过预训练的人脸预设信息提取模型，得到人脸预设信息；其中，所述人脸预设信息包括：预设人脸关键点信息和预设纹理细节图；

根据所述图像纹理和人脸关键点信息，计算所述图像纹理中人脸关键点之间的连接关系，根据所述连接关系将所述图像纹理中的人脸区域划分为多个三角区域；利用所述人脸预设信息，对多个三角区域进行像素处理，输出纹理增强的图像。

进一步的，所述获取视频流的图像纹理，确定所述图像纹理中人脸信息的人脸关键点信息，包括：

对所述视频流进行解码处理，得到图像纹理；

将所述图像纹理输入预训练的人脸关键点检测模型中，输出人脸关键点信息。

进一步的，所述通过预训练的人脸预设信息提取模型，得到人脸预设信息，包括：

采集人脸图像的预设人脸纹理，对所述预设人脸纹理进行关键点标注，得到预设人脸关键点信息；

根据所述预设人脸关键点信息对所述预设人脸纹理进行纹理提取，得到预设纹理细节图。

进一步的，所述根据所述预设人脸关键点信息对所述预设人脸纹理进行纹理提取，得到预设纹理细节图，包括：

对预设人脸纹理进行灰度化处理，得到灰度纹理；

对所述灰度纹理进行高斯滤波处理，得到模糊纹理；

对所述预设人脸纹理进行滤波处理，得到强模糊纹理；

获取模糊纹理与强模糊纹理的纹理差，将所述纹理差确定为纹理细节；