[发明专利]语音合成质量测试方法及装置

权利要求书

1.一种语音合成质量测试方法，包括：

S10、预先基于语音合成系统生成测试用例集；

S20、从所述测试用例集中随机选择设定数量的测试用例；

S30、对当前设定数量的测试用例进行测试，并确定当前局部测试用例通过率；

S40、根据所述当前局部测试用例通过率确定对应于所述测试用例集的置信度区间；当目标通过率小于所述置信度区间的下限值时，判定所述语音合成系统的语音合成质量达标；当目标通过率大于所述置信度区间的上限值时，判定所述语音合成系统的语音合成质量不达标；当目标通过率落入所述置信度区间时，判定无法确定所述语音合成系统的语音合成质量的达标情况；其中，所述目标通过率是为所述测试用例集指定的通过率；

所述置信度区间为：(p₁，p₂)，其中，

其中，n是用例的数目，是用例的通过率，其中α为非置信水平在正态分布内的覆盖面积，Z_α/2即为对应的标准分数；

S50、当能够确定所述语音合成系统的语音合成质量的达标情况时，则结束测试；

S60、当不能够确定所述语音合成系统的语音合成质量的达标情况时，则再次从所述测试用例集中随机选择所述设定数量的测试用例并跳转至步骤S30。

2.根据权利要求1所述的方法，其中，对当前设定数量的测试用例进行测试，并确定当前局部测试用例通过率包括：

将当前设定数量的测试用例分配给听测人员进行测试评分；

根据当前已经测试过的所有测试用例的评分结果确定所述当前局部测试用例通过率。

3.根据权利要求1所述的方法，其中，所述当能够确定所述语音合成系统的语音合成质量的达标情况时，结束测试包括：

当判定所述语音合成系统的语音合成质量达标或者判定所述语音合成系统的语音合成质量不达标时，结束测试。

4.一种语音合成质量测试装置，包括：

测试用例集生成模块，用于预先基于语音合成系统生成测试用例集；

测试用例选择模块，用于从所述测试用例集中随机选择设定数量的测试用例；

通过率确定模块，用于对当前设定数量的测试用例进行测试，并确定当前局部测试用例通过率；

判定模块，用于根据所述当前局部测试用例通过率确定对应于所述测试用例集的置信度区间；当目标通过率小于所述置信度区间的下限值时，判定所述语音合成系统的语音合成质量达标；当目标通过率大于所述置信度区间的上限值时，判定所述语音合成系统的语音合成质量不达标；当目标通过率落入所述置信度区间时，判定无法确定所述语音合成系统的语音合成质量的达标情况；其中，所述目标通过率是为所述测试用例集指定的通过率；

所述置信度区间为：(p₁，p₂)，其中，

其中，n是用例的数目，是用例的通过率，其中α为非置信水平在正态分布内的覆盖面积，Z_α/2即为对应的标准分数；

结束测试模块，用于当能够确定所述语音合成系统的语音合成质量的达标情况时，结束测试；

循环测试模块，用于当不能够确定所述语音合成系统的语音合成质量的达标情况时，再次从所述测试用例集中随机选择所述设定数量的测试用例并调用所述通过率确定模块。

5.根据权利要求4所述的装置，其中，所述通过率确定模块包括：

用例分配单元，用于将当前设定数量的测试用例分配给听测人员进行测试评分；

通过率确定单元，用于根据当前已经测试过的所有测试用例的评分结果确定所述当前局部测试用例通过率。

6.根据权利要求4所述的装置，其中，所述当能够确定所述语音合成系统的语音合成质量的达标情况时，结束测试包括：

当判定所述语音合成系统的语音合成质量达标或者判定所述语音合成系统的语音合成质量不达标时，结束测试。