[发明专利]人脸表情识别方法、电子设备及存储介质

权利要求书

1.一种人脸表情识别方法，其特征在于，包括：

计算待测人脸的第一深度图与所述待测人脸的标准深度图中对应器官的三维变化量；其中，所述标准深度图为自然表情状态下的深度图；

依次对至少一个所述器官的三维变化量与表情库中包含该器官的器官动作组合进行匹配，并将与所述至少一个器官中最后一个器官的三维变化量相匹配的器官动作组合对应的表情类型作为第一深度图中人脸的表情类型；

其中，所述表情库中每个所述器官动作组合对应一个表情类型，以及该器官动作组合所包含的各器官从所述自然表情到对应表情类型的三维变化量；所述至少一个所述器官中非首个执行匹配的器官以及该器官对应的待匹配的器官动作组合基于该非首个器官的前一个执行匹配的器官所对应的匹配结果确定。

2.根据权利要求1所述的人脸表情识别方法，其特征在于，所述依次对至少一个所述器官的三维变化量与表情库中包含该器官的器官动作组合进行匹配，并将与所述至少一个器官中最后一个器官的三维变化量相匹配的器官动作组合对应的表情类型作为第一深度图中人脸的表情类型，包括：

将所述第一深度图中所述三维变化量最大的器官确定为首个第一器官，并对所述第一器官执行如下表情匹配操作：

从表情库中确定与所述第一器官的所述三维变化量相匹配的器官动作组合；

当所述相匹配的器官动作组合均对应同一表情类型时，将该同一表情类型确定为所述第一深度图中人脸的表情类型；

当所述相匹配的器官动作组合对应不同的表情类型时，从所述相匹配的器官动作组合中选择与所述第一器官不同的一个器官，并将待测人脸的该器官作为下一个所述第一器官执行所述表情匹配操作，其中，非首个所述第一器官所对应的器官动作组合的匹配范围为与该非首个所述第一器官的上一个第一器官相匹配的器官动作组合。

3.根据权利要求1或2所述的人脸表情识别方法，其特征在于，所述器官的所述三维变化量包括：所述器官的关键点的三维变化量；

所述计算待测人脸的第一深度图与所述待测人脸的标准深度图中对应器官的三维变化量，包括：

确定所述第一深度图中各器官的关键点，并在所述标准深度图中检测所述关键点的同名点；

计算各器官的关键点和所述关键点的同名点的三维坐标差值，作为相应器官的三维变化量。

4.根据权利要求2所述的人脸表情识别方法，其特征在于，所述从表情库中确定与所述第一器官的所述三维变化量相匹配的器官动作组合，包括：

遍历所述表情库中待匹配的器官动作组合中包含所述第一器官的所述器官动作组合，并将包含所述第一器官的所述器官动作组合作为第一器官动作组合；

计算所述待测人脸的所述第一器官的三维变化量与每个所述第一器官动作组合中所述第一器官的三维变化量之差，得到多个第一差值；

将小于第一阈值的所述第一差值所对应的器官动作组合作为与所述第一器官的所述三维变化量相匹配的器官动作组合。

5.根据权利要求4所述的人脸表情识别方法，其特征在于，所述器官的所述三维变化量包括：所述器官的关键点的三维变化量；

所述计算所述待测人脸的所述第一器官的三维变化量与每个所述第一器官动作组合中所述第一器官的三维变化量之差，得到多个第一差值包括：

针对每个所述第一器官动作组合，分别计算所述待测人脸的所述第一器官的三维变化量与所述第一器官动作组合中所述第一器官的三维变化量在各器官关键点上的第二差值；

将所述第二差值的协方差或均值作为所述第一差值；或者，

从所述第二差值中去掉差值最大的预设数量的第二差值，将剩余的所述第二差值的协方差或均值作为所述第一差值。

6.根据权利要求2、4和5中任一项所述的人脸表情识别方法，其特征在于，所述从所述相匹配的器官动作组合中选择与所述第一器官不同的一个器官，包括：

从所述相匹配的器官动作组合中选择与所述第一器官不同的且在所述相匹配的器官动作组合中出现次数最少的一个器官。