[发明专利]虚拟形象匹配方法、装置及电子设备

说明书

本申请提供一种虚拟形象匹配方法、装置及电子设备，通过提取2D的用户头部图像中目标区域的局部特征和全局特征与2D的模板头部图像进行特征比对，然后将与用户头部图像最相似的模板头部图像对应3D虚拟形象作为与所述用户头部图像对应的用户虚拟形象。如此，以2D的模板头部图像作为中间媒介并且使用局部特征和全局特征进行匹配，可以准确快速地确定出与2D的用户头部图像相符的3D虚拟形象。

技术领域

本申请涉及图像处理技术领域，具体而言，涉及一种虚拟形象匹配方法、装置及电子设备。

背景技术

随着互联网技术的发展，虚拟互动成为一种新兴的社交互动方式，在进行虚拟互动时，用户可以建立自己的虚拟形象(例如，虚拟人物3D模型)，并通过网络与其他用户的虚拟形象进行互动交流。其中，很多用户倾向于构建与自己形貌特征相似的虚拟形象，以增强互动的趣味性。因此，如何帮助用户快速准确的确定其所需要的3D模型模板成为亟待解决的问题。

发明内容

为了克服现有技术中的上述不足，本申请的目的在于提供一种虚拟形象匹配方法，所述方法包括：

获取用户头部图像；

对所述用户头部图像进行目标区域识别，获取所述目标区域图像；

对所述目标区域图像进行局部特征提取及全局特征提取，获得目标局部特征和目标全局特征；

将所述用户头部图像的所述目标局部特征和目标全局特征分别与预存的多个模板头部图像的模板局部特征和模板全局特征进行相似度对比，获得各个所述模板头部图像与所述用户头部图像之间的相似度值；

将所述相似度值最高的模板头部图像对应的3D虚拟形象作为与所述用户头部图像对应的用户虚拟形象。

在一种可能的实现方式中，所述方法还包括：

针对每个所述模板头部图像，根据一标准头部图像对所述模板头部图像进行人脸关键点对齐调整；

对人脸关键点对齐调整之后的所述模板头部图像进行特征提取，获得所述模板局部特征和模板全局特征；

在所述对所述目标区域图像进行局部特征提取及全局特征提取之前，所述方法还包括：

根据所述标准头部图像对所述用户头部图像进行人脸关键点对齐调整。

在一种可能的实现方式中，所述根据所述标准头部图像对所述用户头部图像进行人脸关键点对齐调整的步骤，包括：

确定所述用户头部图像的人脸关键点及多个预设的图像角点；

根据所述人脸关键点及所述图像角点，构建德洛内三角形网，获得由所述三角形网划分出的多个目标三角面片；

针对各所述目标三角面片，以所述标准头像图片中与所述目标三角面片对应的标准三角面片为基准进行插值处理，以调整所述用户头部图像的位置和/或尺寸。

在一种可能的实现方式中，所述对所述目标区域图像进行局部特征提取及全局特征提取，获得目标局部特征和目标全局特征的步骤，包括：

对所述目标区域进行SIFT特征提取，并将提取的特征作为所述目标局部特征；

对所述目标区域进行Hu矩特征提取，并将提取的特征作为所述目标全局特征。

在一种可能的实现方式中，所述将所述用户头部图像的所述目标局部特征和目标全局特征分别与预存的多个模板头部图像的模板局部特征和模板全局特征进行相似度对比，获得各个所述模板头部图像与所述用户头部图像之间相似度值的步骤，包括：

将所述目标局部特征中各SIFT特征点与所述模板局部特征中的各SIFT特征点进行特征大小及特征方向匹配；