[发明专利]多面部表情捕捉方法、装置、电子设备及计算机存储介质

权利要求书

1.一种多面部表情捕捉方法，其特征在于，所述多面部通过多个图像获取装置捕捉；所述多个图像获取装置的图像捕捉范围为覆盖所述多面部活动的范围；所述多面部表情捕捉方法包括：

获取所述多面部的多幅图像；

基于所述多面部活动的范围，对所述多幅图像进行人脸识别、表情识别和人脸姿态识别；

基于所述人脸识别、所述表情识别和所述人脸姿态识别的结果，确定各面部的表情信息；

如果针对任一面部，获取多幅图像，则所述方法包括：

对所述多幅图像进行人脸识别、表情识别和人脸姿态识别的步骤，具体包括：

对所述任一面部的所述多幅图像进行人脸识别、表情识别和人脸姿态识别，得到多个识别结果；

基于所述人脸识别、所述表情识别和所述人脸姿态识别的结果，确定各面部的表情信息的步骤，具体包括：

确定各识别结果的融合权重；

通过所述融合权重，将所述各识别结果进行融合；

基于融合结果，确定所述任一面部的表情信息；

所述确定各识别结果的融合权重的步骤，具体包括：

计算所述任一面部的各图像与各图像获取装置之间的距离、以及所述任一面部的所述各图像中的人脸的朝向；

确定所述任一面部的所述各图像中人脸特征点；

基于所述任一面部的所述各图像与所述各图像获取装置之间的所述距离，确定多个第一权重；

基于所述人脸特征点相对于所述人脸朝向的平均可信度，确定所述任一面部的任一表情的多个第二权重；

将分别对应于所述任一面部的所述各图像中的第一权重与第二权重求和，得到多个求和结果，作为所述各识别结果的所述融合权重。

2.一种多面部表情捕捉装置，其特征在于，所述多面部通过多个图像获取装置捕捉；所述多个图像获取装置的图像捕捉范围为覆盖所述多面部活动的范围；所述多面部表情捕捉装置包括：

获取模块，用于获取所述多面部的多幅图像；

识别模块，用于基于所述多面部活动的范围，对所述多幅图像进行人脸识别、表情识别和人脸姿态识别；

确定模块，用于基于所述人脸识别、所述表情识别和所述人脸姿态识别的结果，确定各面部的表情信息；

如果针对任一面部，获取多幅图像，则所述装置包括：

所述识别模块，具体用于：对所述任一面部的所述多幅图像进行人脸识别、表情识别和人脸姿态识别，得到多个识别结果；

所述确定模块，具体用于：确定各识别结果的融合权重；通过所述融合权重，将所述各识别结果进行融合；基于融合结果，确定所述任一面部的表情信息；

所述确定模块具体还用于：

计算所述任一面部的各图像与各图像获取装置之间的距离、以及所述任一面部的所述各图像中的人脸的朝向；

确定所述任一面部的所述各图像中人脸特征点；

基于所述任一面部的所述各图像与所述各图像获取装置之间的所述距离，确定多个第一权重；

基于所述人脸特征点相对于所述人脸朝向的平均可信度，确定所述任一面部的任一表情的多个第二权重；

将分别对应于所述任一面部的所述各图像中的第一权重与第二权重求和，得到多个求和结果，作为所述各识别结果的所述融合权重。

3.一种电子设备，其特征在于，包括处理器和存储器；其中：所述存储器，用于存放计算机程序；

所述处理器，用于执行所述存储器上所存放的程序时，实现权利要求1中所述的方法步骤。

4.一种计算机可读存储介质，其特征在于，其用于存储非暂时性计算机可读指令，当所述非暂时性计算机可读指令由计算机执行时，使得所述计算机执行如权利要求1中所述的多面部表情捕捉方法。