[发明专利]匹配情感极性的词语采集方法、装置、电子设备

权利要求书

1.一种匹配情感极性的词语采集方法，其特征在于，包括：

步骤S1,获取在第一用户和第二用户对话过程中，所述第一用户的语音和所述第二用户的面部图像；

步骤S2,通过对所述第二用户的面部图像进行表情识别，确定所述第二用户在所述对话过程中不同时间发生的各个面部表情；

步骤S3,根据所述各个面部表情的发生时间和所述语音的发生时间，对所述第二用户的各个面部表情和所述第一用户的语音转换得到的文本进行匹配，确定每个所述面部表情对应的所述文本；

步骤S4,根据所述第二用户的每个所述面部表情对应的所述文本，确定匹配所述第二用户的预设情感极性的词语。

2.根据权利要求1所述的方法，其特征在于，所述根据所述各个面部表情的发生时间和所述语音的发生时间，对所述第二用户的各个面部表情和所述第一用户的语音转换得到的文本进行匹配，确定每个所述面部表情对应的所述文本的步骤，包括：

对于每个所述面部表情，将所述语音中在该面部表情的发生时间预设时间范围内发生的所述第一用户的语音片段，作为匹配该面部表情的语音片段；

对于每个所述面部表情，将匹配该面部表情的语音片段转换得到的文本，作为匹配该面部表情的文本。

3.根据权利要求1所述的方法，其特征在于，所述根据所述第二用户的每个所述面部表情对应的所述文本，确定匹配所述第二用户的预设情感极性的词语的步骤，包括：

按照面部表情和情感极性的对应关系，确定各所述面部表情匹配的情感极性；

将各所述面部表情匹配的情感极性，作为与所述面部表情匹配的文本所匹配的情感极性；

根据匹配同一情感极性的所述文本中不同词语出现的频次，确定匹配所述第二用户的各情感极性的词语。

4.根据权利要求1所述的方法，其特征在于，所述预设情感极性包括：正面情感、负面情感，所述根据所述第二用户的每个所述面部表情对应的所述文本，确定匹配所述第二用户的预设情感极性的词语的步骤之后，还包括：

根据匹配所述第二用户的正面情感这一情感极性的词语，建立所述第二用户的正面情感词库；和/或，

根据匹配所述第二用户的负面情感这一情感极性的词语，建立所述第二用户的负面情感词库。

5.根据权利要求1所述的方法，其特征在于，所述第一用户和第二用户对话过程为预设会话场景下的对话过程，所述根据所述第二用户的每个所述面部表情对应的所述文本，确定匹配所述第二用户的预设情感极性的词语的步骤之后，还包括：

重新选择所述第一用户和所述第二用户，并重复执行步骤S1至步骤S4,直至满足词语集合输出条件；

根据匹配所选择的所有所述第二用户的所述预设情感极性的词语，输出所述会话场景下与所述预设情感极性匹配的词语集合。

6.一种匹配情感极性的词语采集装置，其特征在于，包括：

语音和面部图像获取模块，用于获取在第一用户和第二用户对话过程中，所述第一用户的语音和所述第二用户的面部图像；

面部表情确定模块，用于通过对所述第二用户的面部图像进行表情识别，确定所述第二用户在所述对话过程中不同时间发生的各个面部表情；

面部表情和语音匹配模块，用于根据所述各个面部表情的发生时间和所述语音的发生时间，对所述第二用户的各个面部表情和所述第一用户的语音转换得到的文本进行匹配，确定每个所述面部表情对应的所述文本；

匹配情感极性的词语确定模块，用于根据所述第二用户的每个所述面部表情对应的所述文本，确定匹配所述第二用户的预设情感极性的词语。

7.根据权利要求6所述的装置，其特征在于，所述面部表情和语音匹配模块，进一步用于：

对于每个所述面部表情，将所述语音中在该面部表情的发生时间预设时间范围内发生的所述第一用户的语音片段，作为匹配该面部表情的语音片段；

对于每个所述面部表情，将匹配该面部表情的语音片段转换得到的文本，作为匹配该面部表情的文本。