[发明专利]语音操控系统的评价系统及方法

说明书

本发明提供一种语音操控系统的评价系统及方法，评价系统存储包含语音信号、语音文本、时间和用户反馈值的一一对应关系的日志服务器，评价系统还包括：查询模块，用于查询一语音信号对应的用户反馈值A；获取模块，用于获取时间区间内的时间对应的语音文本；计算模块，用于计算语音信号对应的语音文本与获取的每一语音文本之间的相似度，并将计算出的相似度的累加和作为总相似度；评分模块，用于通过公式Score=xA+yB计算语音信号的评分值，其中x+y=1，B为总相似度的倒数。本发明基于语音操控系统真实用户的反馈和历史使用行为建立评价机制，保证尽可能少使用人工的情况下，提高对语音操控系统的评价的准确性。

技术领域

本发明涉及一种移动终端中的语音操控系统的评价系统及方法，特别涉及一种对语音操控系统进行评价的评价系统以及利用该评价系统实现的评价方法。

背景技术

随着移动终端的普及和语音识别技术的日益成熟，现在移动终端中的移动应用越来越多地可以通过语音进行操控，所以如何评价语音操控的效果，并在评价机制的基础上提升语音操控系统的性能是一个重要的问题。

现有的传统评价方法是通过人工一条条地比对用户发出的语音和语音操控系统接收到该语音所执行的操作的对应度来评价该语音操控系统，这种评价方法在使用大量人工的基础上，加入了评测人员的主观感受，影响了评价的准确性，针对语音操控系统如何建立更好的评价机制，并且如何将评价机制得到的结果应用到提升语音操控系统本身性能是迫切需要解决的问题。

发明内容

本发明要解决的技术问题是为了克服现有技术中传统的对语音操控系统进行评价的评价方式需要使用大量人工并加入了评测人员的主观感受，以致影响了评价的准确性的缺陷，提供一种语音操控系统的评价系统及方法，在保证尽可能少使用人工的情况下，提高对语音操控系统的评价的准确性。

本发明是通过下述技术方案来解决上述技术问题的：

本发明提供一种语音操控系统的评价系统，其特点在于，其存储一包含语音信号、语音文本、时间和用户反馈值的一一对应关系的日志服务器，该评价系统还包括：

一查询模块，用于查询一语音信号对应的用户反馈值A；

一获取模块，用于获取一时间区间内的时间对应的语音文本；

一计算模块，用于计算该语音信号对应的语音文本与获取的每一语音文本之间的相似度，并将计算出的相似度的累加和作为总相似度；

一评分模块，用于通过公式Score=xA+yB计算该语音信号的评分值，其中x+y=1，B为总相似度的倒数。

较佳地，该评价系统还包括一设置模块，该设置模块用于设置该时间区间。

较佳地，相似度被表达为一条语音文本转换成另一条语音文本需要的字符增加、删除或修改的最小步骤数。

较佳地，该评价系统还存储有一设定阈值，该评价系统还包括一判断模块和一创建模块，该判断模块用于判断该语音信号对应的用户反馈值是否小于该设定阈值，若是则调用该创建模块；

该创建模块用于创建该语音信号相匹配的语音文本和操作，并将该语音信号及相匹配的语音文本和操作的对应关系发送至该语音操控系统中。

在本方案中设置用户不满意的评分阈值，以过滤出用户不满意的语音操控系统所执行的操作，并进一步分析用户不满意的操作，建立用户的操作指令与该语音操控系统应该正确执行的操作之间的对应关系，并将该对应关系反馈至该语音操控系统，使得该语音操控系统在再次接收到相同的操作指令时，能够正确的执行相对应的操作，进而提高该语音操控系统的准确性及用户的满意度。

本发明还提供一种语音操控系统的评价系统，其特点在于，其存储一包含语音信号、语音文本、时间和用户反馈值的一一对应关系的日志服务器，该评价系统还包括：