[发明专利]基于知识图谱的人机交互方法及系统

权利要求书

1.一种基于知识图谱的人机交互方法，其特征在于，包括：

获取用户的多模态输入记录，对多模态输入记录进行处理；

根据知识图谱对多模态输入记录和意图模块进行关联，获取关联记录；所述关联记录包括多模态输入记录和关联到的意图模块；

当关联到的意图模块唯一时，基于该意图模块中的状态、场景、模板、模型、方法，根据输入信息和知识图谱对多模态输入记录进行解析，获取该意图模块的解析结果，作为多模态输入记录的解析结果；或者，当关联到的意图模块不唯一时，基于每个意图模块中的状态、场景、模板、模型、方法，根据输入信息和知识图谱对多模态输入记录进行解析，获取每个意图模块的解析结果，作为多模态输入记录的解析结果；

当多模态输入记录的解析结果唯一时，输出该解析结果；或者，当多模态输入记录的解析结果不唯一时，对多个解析结果进行评估，获取最优解析结果，输出该最优解析结果。

2.根据权利要求1所述的基于知识图谱的人机交互方法，其特征在于，所述多模态输入记录为文字、语音、动画、表情、动作、手势、图片或视频。

3.根据权利要求1或2所述的基于知识图谱的人机交互方法，其特征在于，还包括：

当多模态输入记录的解析结果唯一时，根据多模态输入记录及其解析结果对知识图谱进行更新；或者，

当多模态输入记录的解析结果不唯一时，根据多模态输入记录及其最优解析结果对知识图谱进行更新。

4.根据权利要求3所述的基于知识图谱的人机交互方法，其特征在于，还包括：

将知识图谱的更新记录存储于云服务器。

5.根据权利要求1或2所述的基于知识图谱的人机交互方法，其特征在于，所述意图模块和知识图谱存储于云服务器。

6.一种基于知识图谱的人机交互系统，其特征在于，包括：

输入模块，用于获取用户的多模态输入记录，对多模态输入记录进行处理；

意图识别模块，用于根据知识图谱对多模态输入记录和意图模块进行关联，获取关联记录；所述关联记录包括多模态输入记录和关联到的意图模块；

解析模块，用于当关联到的意图模块唯一时，基于该意图模块中的状态、场景、模板、模型、方法，根据输入信息和知识图谱对多模态输入记录进行解析，获取该意图模块的解析结果，作为多模态输入记录的解析结果；或者，当关联到的意图模块不唯一时，基于每个意图模块中的状态、场景、模板、模型、方法，根据输入信息和知识图谱对多模态输入记录进行解析，获取每个意图模块的解析结果，作为多模态输入记录的解析结果；

输出模块，用于当多模态输入记录的解析结果唯一时，输出该解析结果；或者，当多模态输入记录的解析结果不唯一时，对多个解析结果进行评估，获取最优解析结果，输出该最优解析结果。

7.根据权利要求6所述的基于知识图谱的人机交互系统，其特征在于，所述多模态输入记录为文字、语音、动画、表情、动作、手势、图片或视频。

8.根据权利要求6或7所述的基于知识图谱的人机交互系统，其特征在于，所述输出模块还用于当多模态输入记录的解析结果唯一时，根据多模态输入记录及其解析结果对知识图谱进行更新；或者，当多模态输入记录的解析结果不唯一时，根据多模态输入记录及其最优解析结果对知识图谱进行更新。

9.根据权利要求8所述的基于知识图谱的人机交互系统，其特征在于，还包括：

更新记录模块，用于将知识图谱的更新记录存储于云服务器。

10.根据权利要求6或7所述的基于知识图谱的人机交互系统，其特征在于，所述意图模块和知识图谱存储于云服务器。