[发明专利]虚拟形象直播方法、虚拟形象直播装置和电子设备

权利要求书

1.一种虚拟形象直播方法，其特征在于，应用于直播设备，用于对直播画面中展示的虚拟形象进行控制，所述方法包括：

通过图像获取设备获取主播的视频帧；

对所述视频帧进行人脸识别，并在所述视频帧中识别到人脸图像时，对该人脸图像进行特征提取处理，得到多个人脸特征点；

在针对所述虚拟形象预先构建的多个面部模型中确定与所述多个人脸特征点对应的目标面部模型，并根据该目标面部模型对所述虚拟形象的面部图像进行渲染；

所述方法还包括：

获取主播在不同面部状态下的多个面部图像，并选取其中一个作为参考图像；

按照预设的特征提取方法分别提取出每个所述面部图像中包括的预设数量个人脸特征点；

针对每个面部图像，将该面部图像中提取出的各人脸特征点与所述参考图像中提取出的各人脸特征点进行对比，得到该面部图像中各人脸特征点相对于所述参考图像中各人脸特征点的变化值；

将变化值大于预设阈值的人脸特征点作为执行所述特征提取处理时需要提取的目标特征点。

2.根据权利要求1所述的方法，其特征在于，所述在针对所述虚拟形象预先构建的多个面部模型中确定与所述多个人脸特征点对应的目标面部模型，并根据该目标面部模型对所述虚拟形象的面部状态进行控制的步骤，包括：

根据所述多个人脸特征点得到主播的当前面部信息；

根据所述当前面部信息从针对所述虚拟形象预先构建的多个面部模型中获取与该当前面部信息对应的目标面部模型；以及

根据所述目标面部模型对所述虚拟形象的面部状态进行控制。

3.根据权利要求2所述的虚拟形象直播方法，其特征在于，所述根据所述当前面部信息从针对所述虚拟形象预先构建的多个面部模型中获取与该当前面部信息对应的目标面部模型的步骤，具体为：

将所述当前面部信息与针对所述虚拟形象预先构建的多个面部模型分别进行匹配度计算，并将匹配度满足预设条件的面部模型确定为所述当前面部信息对应的目标面部模型。

4.根据权利要求1-3任意一项所述的虚拟形象直播方法，其特征在于，所述人脸图像为深度图像，该深度图像具有各所述人脸特征点的位置信息和深度信息。

5.一种虚拟形象直播装置，其特征在于，应用于直播设备，用于对直播画面中展示的虚拟形象进行控制，所述装置包括：

视频帧获取模块，用于通过图像获取设备获取主播的视频帧；

特征点提取模块，用于对所述视频帧进行人脸识别，并在所述视频帧中识别到人脸图像时，对该人脸图像进行特征提取处理，得到多个人脸特征点；

面部状态控制模块，用于在针对所述虚拟形象预先构建的多个面部模型中确定与所述多个人脸特征点对应的目标面部模型，并根据该目标面部模型对所述虚拟形象的面部图像进行渲染；

所述装置还包括特征点确定模块，用于：

获取主播在不同面部状态下的多个面部图像，并选取其中一个作为参考图像；按照预设的特征提取方法分别提取出每个所述面部图像中包括的预设数量个人脸特征点；针对每个面部图像，将该面部图像中提取出的各人脸特征点与所述参考图像中提取出的各人脸特征点进行对比，得到该面部图像中各人脸特征点相对于所述参考图像中各人脸特征点的变化值；将变化值大于预设阈值的人脸特征点作为执行所述特征提取处理时需要提取的目标特征点。

6.一种电子设备，其特征在于，包括存储器、处理器和存储于该存储器并能够在该处理器上运行的计算机程序，该计算机程序在该处理器上运行时实现权利要求1-4任意一项所述虚拟形象直播方法的步骤。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被执行时实现权利要求1-4任意一项所述虚拟形象直播方法的步骤。