[发明专利]虚拟人像渲染方法、装置以及存储介质

说明书

本发明提供一种虚拟人像渲染方法、装置以及存储介质，该方法包括：所述第一终端设备采集待处理图像；所述第一终端设备根据所述待处理图像，获取所述待处理图像中的人脸图像；所述第一终端设备根据所述人脸图像，获取所述人脸图像对应的表情参数，所述表情参数用于表征所述人脸图像上各个肌肉动作的强烈程度；所述第一终端设备将所述表情参数发送至第二终端设备，所述表情参数用于指示所述第二终端设备对虚拟人像的表情和动作进行渲染。由于第一终端设备发送给第二终端设备的并不是高清图像，而是表情参数和位姿参数，这两种参数所占用的带宽和高清图像相比是很小的，卡顿现象显著减少，提升了学生端的上课体验度。

技术领域

本发明涉及通信技术领域，尤其涉及一种虚拟人像渲染方法、装置以及存储介质。

背景技术

随着终端技术不断发展，手机和电脑等终端设备成为人们日常生活中实时通讯必不可少的工具。终端设备所能实现的功能日趋丰富，其中视频通话、云课堂以及云会议等沟通方式可以让用户足不出户即可享受相应的网络资源。

目前，在使用云课堂或者云会议时，主讲端展示的是讲师或者主讲人的真实人像。这种方式有如下缺陷：讲师或者主讲人的个人身份信息可能泄露；而且，高清图像对网络带宽的要求非常高，当网络带宽有限时，可能造成卡顿。

发明内容

本发明提供一种虚拟人像渲染方法和装置，用以解决现有技术传输真实图像带来的卡顿等问题。

第一方面，本发明提供一种虚拟人像渲染方法，应用于第一终端设备，包括：该第一终端设备采集待处理图像；该第一终端设备根据该待处理图像，获取该待处理图像中的人脸图像；该第一终端设备根据该人脸图像，获取该人脸图像对应的表情参数，该表情参数用于表征该人脸图像上各个肌肉动作的强烈程度；该第一终端设备将该表情参数发送至第二终端设备，该表情参数用于指示该第二终端设备对虚拟人像的表情和动作进行渲染。

可选的，该第一终端设备将该表情参数发送至第二终端设备之前，还包括：该第一终端设备根据该人脸图像，获取该人脸图像上关键点的位姿参数；该第一终端设备将该表情参数发送至第二终端设备，包括：该第一终端设备将该表情参数和该位姿参数发送至第二终端设备，以使该第二终端设备根据该表情参数和该位姿参数，对虚拟人像的表情和动作进行渲染。

可选的，该第一终端设备根据该人脸图像，获取该人脸图像上关键点的位姿参数，包括：该第一终端设备根据该人脸图像，获取该人脸图像上关键点的二维坐标；该第一终端设备根据该人脸图像上关键点的二维坐标，获取该人脸图像上关键点的位姿参数。

可选的，该第一终端设备根据该人脸图像，获取该人脸图像上关键点的位姿参数，包括：该第一终端设备将该人脸图像输入位姿估计模型；将该位姿估计模型的输出结果确定为该位姿参数。

可选的，该表情参数包括多个精细化运动单元AU值；该第一终端设备根据该人脸图像，获取该人脸图像对应的表情参数，包括：该第一终端设备根据该人脸图像和表情特征提取模型，提取该人脸图像上不同肌肉动作的特征；该第一终端设备根据该人脸图像上不同肌肉动作的特征和表情估计模型，获取该多个精细化运动单元AU值。