[发明专利]基于视频的表情分析方法、装置、电子设备及存储介质

权利要求书

1.一种基于视频的表情分析方法，其特征在于，所述方法包括：

在接收到基于视频的表情分析指令后，接收带有指定人物的视频；

提取所述视频中所述指定人物的语音；

对所述语音进行自然语言处理，得到处理后的目标语音；

获取预先配置的语音数据集，所述语音数据集中存储着所有语音与相应分析结果间的对应关系；

根据所述目标语音，从所述语音数据集中确定语音分析数据；

提取所述视频中所述指定人物的目标表情数据；

获取预先配置的表情数据集，所述表情数据集中存储着所有表情与相应分析结果间的对应关系；

根据所述目标表情数据，从所述表情数据集中确定表情分析数据；

根据所述语音分析数据及所述表情分析数据，确定分析结果。

2.如权利要求1所述的基于视频的表情分析方法，其特征在于，所述提取所述视频中所述指定人物的目标表情数据包括：

将所述视频做分帧处理，得到至少一个视频段；

提取每个视频段中所述指定人物的每个表情数据；

将每个表情数据加权以确定所述目标表情数据。

3.如权利要求1所述的基于视频的表情分析方法，其特征在于，所述根据所述目标表情数据，从所述表情数据集中确定表情分析数据包括：

从所述目标表情数据中获取目标微表情数据；

从所述表情数据集中，确定与所述目标微表情数据对应的微表情分析数据；

从所述目标表情数据中获取目标面相数据；

从所述表情数据集中，确定与所述目标面相数据对应的面相分析数据；

根据所述微表情分析数据及所述面相分析数据，确定所述表情分析数据。

4.如权利要求1所述的基于视频的表情分析方法，其特征在于，所述根据所述语音分析数据及所述表情分析数据，确定分析结果包括：

从所述语音分析数据中确定所述语音分析数据的第一等级；

从所述表情分析数据中确定所述表情分析数据的第二等级；

根据所述第一等级及所述第二等级，从所述语音分析数据及所述表情分析数据中，确定主分析数据及辅助分析数据；

组合所述主分析数据和所述辅助分析数据以得到所述分析结果。

5.如权利要求1所述的基于视频的表情分析方法，其特征在于，在确定所述分析结果后，所述方法还包括：

将所述分析结果发送至指定医务人员，以辅助所述医务人员进行分析。

6.如权利要求1所述的基于视频的表情分析方法，其特征在于，所述方法还包括：

当所述视频为所述指定人物发来的视频通话时，将所述分析结果发送至所述指定人物的终端上。

7.如权利要求1所述的基于视频的表情分析方法，其特征在于，所述方法还包括：

当接收到所述指定人物发送的人工分析指令时，根据所述分析结果，匹配对应的目标医务人员；

建立所述指定人物的终端与所述目标医务人员的终端的网络连接。

8.一种基于视频的表情分析装置，其特征在于，所述装置包括：

接收单元，用于在接收到基于视频的表情分析指令后，接收带有指定人物的视频；

提取单元，用于提取所述视频中所述指定人物的语音；

处理单元，用于对所述语音进行自然语言处理，得到处理后的目标语音；

获取单元，用于获取预先配置的语音数据集，所述语音数据集中存储着所有语音与相应分析结果间的对应关系；

确定单元，用于根据所述目标语音，从所述语音数据集中确定语音分析数据；

所述提取单元，还用于提取所述视频中所述指定人物的目标表情数据；

所述获取单元，还用于获取预先配置的表情数据集，所述表情数据集中存储着所有表情与相应分析结果间的对应关系；

所述确定单元，还用于根据所述目标表情数据，从所述表情数据集中确定表情分析数据；

所述确定单元，还用于根据所述语音分析数据及所述表情分析数据，确定分析结果。