[发明专利]用于资源型数据的数据增量测试方法及系统

说明书

本发明实施例提供一种用于资源型数据的数据增量测试方法。该方法包括：通过词库功能模板对增量词条数据扩充，生成增量词条测试用例，以及增量词条测试用例对应的预期语义解析结果；利用增量词条数据更新后的语义理解服务解析增量词条测试用例，确定实际语义解析结果；基于自动化的语义结果对比工具对预期语义解析结果以及实际语义解析结果评估，确定增量词条数据中的错误词条，在增量词条数据中过滤错误词条，确定更新后的语义理解服务的功能性。本发明实施例还提供一种用于资源型数据的数据增量测试系统。本发明实施例通过扩大模板的数量可以扩大测试用例的数量，从而提高测试强度。

技术领域

本发明涉及智能语音领域，尤其涉及一种用于资源型数据的数据增量测试方法及系统。

背景技术

语义理解中用到的资源型数据，包括歌曲名/歌手名/影视名称/故事名称等词库资源，需要做定期的更新适配新出的歌曲/电影，来提高语义理解准确率和提升用户体验。目前这些厂商在更新这些词库数据的时候测试方案比较欠缺，只能保证源头数据质量，或者通过单一的功能说法人工检查的方式进行。

在实现本发明过程中，发明人发现相关技术中至少存在如下问题：

将词条数据新增到资源中，并通过功能说法测试语义理解的结果，人工检查结果词条是否生效。这样操作往往测试强度不够：较少的功能说法不能保证新增词条适用于已有的大部分功能。测试范围不够：没有评估新增词条对其他领域的影响。效率低：人工检查词条是否生效效率低，无法做到大批量数据的更新，也很难做高频的更新操作。

发明内容

为了至少解决现有技术中针对这些新增的资源型数据没有全面的测试方案，对于测试结果没有自动化的评估方案，和自动化的错误词条排除的问题。

第一方面，本发明实施例提供一种用于资源型数据的数据增量测试方法，包括：

通过词库功能模板对增量词条数据扩充，生成增量词条测试用例，以及所述增量词条测试用例对应的预期语义解析结果；

利用所述增量词条数据更新后的语义理解服务解析所述增量词条测试用例，确定实际语义解析结果；

基于自动化的语义结果对比工具对所述预期语义解析结果以及所述实际语义解析结果评估，确定所述增量词条数据中的错误词条，在所述增量词条数据中过滤所述错误词条，确定所述更新后的语义理解服务的功能性。

第二方面，本发明实施例提供一种用于资源型数据的数据增量测试系统，包括：

数据扩充程序模块，用于通过词库功能模板对增量词条数据扩充，生成增量词条测试用例，以及所述增量词条测试用例对应的预期语义解析结果；

语义解析结果确定程序模块，用于利用所述增量词条数据更新后的语义理解服务解析所述增量词条测试用例，确定实际语义解析结果；

增量测试程序模块，用于基于自动化的语义结果对比工具对所述预期语义解析结果以及所述实际语义解析结果评估，确定所述增量词条数据中的错误词条，在所述增量词条数据中过滤所述错误词条，确定所述更新后的语义理解服务的功能性。

第三方面，提供一种电子设备，其包括：至少一个处理器，以及与所述至少一个处理器通信连接的存储器，其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例的用于资源型数据的数据增量测试方法的步骤。

第四方面，本发明实施例提供一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现本发明任一实施例的用于资源型数据的数据增量测试方法的步骤。