[发明专利]知识库的检验方法、装置及终端

权利要求书

1.一种知识库的检验方法，所述知识库包括多个问题，其特征在于，包括：

接收多个测试问和其对应的期待问题，每一测试问对应一个期待问题，所述期待问题为所述知识库中的问题，所述测试问用以进行语义正确性检测，所述多个测试问和其对应的期待问题是预先配置的；

对于所述测试问，计算每个所述测试问与所述知识库中所述多个问题的最高语义相似度；

基于所述最高语义相似度确定每个所述测试问的检验结果，所述检验结果包括所述测试问是否匹配到所述知识库中的问题，以及在匹配到所述知识库中的问题时，匹配的问题是否与所述测试问对应的期待问题一致；

若确定所述检验结果为未匹配到所述知识库中的问题，或者确定匹配的问题与所述期待问题不一致，则对所述测试问进行标记，以提示基于被标记的测试问的期待问题对所述知识库进行修改。

2.根据权利要求1所述的知识库的检验方法，其特征在于，所述对所述测试问进行标记包括：

在所述测试问未匹配到所述知识库中的问题时，对所述测试问增加第一标记；

对于标记为所述第一标记的所述测试问，提示在所述知识库中修改所述测试问对应的期待问题。

3.根据权利要求1所述的知识库的检验方法，其特征在于，所述对所述测试问进行标记包括：

在匹配到所述知识库中的问题与所述测试问对应的期待问题不一致时，对所述测试问增加第二标记；

对于标记为所述第二标记的所述测试问，提示在所述知识库中对所述测试问匹配到的问题和所述测试问对应的期待问题进行区分或合并。

4.根据权利要求1所述的知识库的检验方法，其特征在于，还包括：

若确定所述检验结果为匹配到所述知识库中的问题时，且匹配的问题与所述期待问题一致，则所述测试问检验合格。

5.根据权利要求1所述的知识库的检验方法，其特征在于，所述基于所述最高语义相似度确定每个所述测试问检验结果包括：

所述最高语义相似度达到第一阈值时，则确定所述测试问与所述知识库中的问题相匹配；

所述最高语义相似度小于所述第一阈值时，则确定所述测试问未匹配到所述知识库中的问题；

所述测试问与所述知识库中的问题相匹配时，判断所述知识库中的问题是否与所述期待问题一致。

6.根据权利要求5所述的知识库的检验方法，其特征在于，还包括：

根据所述检验结果计算检验准确率；

调整所述第一阈值，直至所述检验准确率达到预设准确率。

7.根据权利要求6所述的知识库的检验方法，其特征在于，采用以下公式计算所述检验准确率：

其中，R_e为所述检验准确率，R_T为匹配到所述知识库中的问题与所述测试问对应的期待问题一致的测试问的数量，N_F为匹配到所述知识库中的问题与所述测试问对应的期待问题不一致的所述测试问的数量，与未匹配到所述知识库中的问题的测试问的数量之和。

8.根据权利要求1至7任一项所述的知识库的检验方法，其特征在于，所述知识库包括多个标准问，所述计算所述测试问与所述知识库中所述多个问题的最高语义相似度包括：

计算所述测试问与所述知识库中多个标准问的最高语义相似度。

9.根据权利要求5至7任一项所述的知识库的检验方法，所述知识库包括多个标准问和所述多个标准问对应的扩展问，所述计算所述测试问与所述知识库中多个问题的最高语义相似度包括：

计算所述测试问与所述多个标准问的第一最高语义相似度；

在所述第一最高语义相似度小于所述第一阈值时，则计算测试问与所述知识库中扩展问的第二最高语义相似度，以作为所述最高语义相似度。

10.根据权利要求1所述的知识库的检验方法，其特征在于，所述知识库中包括知识点，所述知识点包括标准问；所述期待问题为标准问。