[发明专利]基于众包来更新用于数字个人助理的语言理解分类器模型

说明书

一种用于更新语言理解分类器模型的方法包括经由计算设备的一个或多个话筒接收来自该计算设备的用户的数字语音输入。使用数字语音输入的自然语言处理被用于确定用户语音请求。在确定用户语音请求不匹配数字个人助理的模式定义中的多个预定义语音命令中的至少一者之际，使用最终用户标记工具的GUI来接收对以下各项中的至少一者的用户选择：多个可用意图中的至少一个意图和/或针对该至少一个意图的至少一个槽。通过将用户语音请求和用户选择进行配对来生成经标记数据集，并且经标记数据集被用来更新语言理解分类器模型。

背景

随着计算技术的发展，越来越强大的移动设备已经变得可用。例如，智能电话以及其他计算设备已经变得普及。此类设备的处理能力已导致开发出不同类型的功能性，诸如与数字个人助理相关的功能性。

数字个人助理可以被用于执行用于个体的任务或服务。例如，数字个人助理可以是在移动设备或台式计算机上运行的软件模块。此外，实现在移动设备内的数字个人助理具有交互式和内置会话理解力以能够对用户问题或语音命令作出响应。可以由数字个人助理执行的任务和服务的示例可以包括拨打电话呼叫、发送电子邮件或文本消息和设置日历提醒。

尽管数字个人助理可被实现来使用代理执行多个任务，然而编程/定义每个反应型代理可能是耗时的。因此，在与创建和编辑用于实现数字个人助理的反应型代理定义和相关联的语言理解分类器模型相关的技术方面存在充足的改善机会。

概述

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。

根据一个或多个方面，一种用于更新语言理解分类器模型的方法可包括经由计算设备的一个或多个话筒接收来自该计算设备的用户的数字语音输入。还可以从用户接收使用经由其他输入(例如，经由文本输入或其他类型的输入)的输入。使用数字语音输入执行自然语言处理以确定用户语音请求。在确定用户语音请求不匹配在该计算设备上运行的数字个人助理的代理定义(例如，可扩展标记语言(XML)模式定义)中的多个预定义任务中的至少一者之际，可以使用该计算设备的最终用户标记工具(EULT)的图形用户界面来接收用户选择。任务可通过语音(或文本录入的)命令以及通过一个或多个附加装置(诸如通过基于规则的引擎、机器学习分类器，等等)来定义。用户选择可包括针对域的多个可用意图中的至少一个意图。可任选地，用户选择还可包括针对该至少一个意图的至少一个槽。该至少一个意图与被用于执行域的功能类别的至少一个功能的至少一个动作相关联。当被包括在用户选择中时，该至少一个槽指示用于执行该至少一个动作的值。可通过将用户语音请求与用户选择(例如，所选域、意图、和/或槽)进行配对(或以其他方式进行关联)来生成经标记数据集。可以从与代理定义相关联的多个可用语言理解分类器中选择语言理解分类器，该选择至少基于由该用户选择的至少一个意图。可基于所生成的经标记数据集来更新所选择的语言理解分类器。

根据一个或多个方面，一种服务器计算机包括处理单元和耦合到处理单元的存储器。服务器计算机可被配置成执行用于更新语言理解分类器模型的操作。各操作可包括从通信地耦合到服务器计算机的多个计算设备中的至少一个计算设备接收对多个可用意图中的至少一个意图的第一用户选择。可任选地，用户选择还可包括针对该至少一个意图的至少一个槽。在被包括在用户选择中时，该至少一个意图可与被用来执行域的功能类别的至少一个功能的至少一个动作相关联。该至少一个槽可指示用于执行该至少一个动作的值。第一用户选择可与在至少一个计算设备处接收到的数字语音输入相关联。可以从多个计算设备中的至少另一计算设备接收与第一用户选择相同的多个后续用户选择。可通过将数字语音输入与第一用户选择进行配对来生成经标记数据集。可从与一个或多个XML模式定义相关联的多个可用语言理解分类器中选择语言理解分类器，该选择至少基于数字语音输入、第一用户选择的域、意图和/或槽中的一者或多者。可基于所生成的经标记数据集来更新所选择的语言理解分类器。