[发明专利]使用机器学习处理自然语言以基于槽描述符确定槽值

说明书

基于接收到的自然语言输入和基于(多个)槽的(多个)描述符来确定(多个)槽值。在一些实施方式中，自然语言输入作为人与自动化助理的对话的一部分被接收。基于自然语言输入的(多个)词条生成自然语言输入嵌入。进一步，生成(或接收)(多个)描述符嵌入，其中描述符嵌入中的每一个是基于被分配给由对话指示的域的相对应的槽的(多个)描述符而生成的。将自然语言输入嵌入和(多个)描述符嵌入应用于神经网络模型的(多个)层，以针对(多个)槽中的每一个确定自然语言输入的哪个(哪些)词条对应于槽。生成包括(多个)槽的(多个)槽值的命令，其中(多个)槽中的一个或多个的(多个)槽值是基于被确定为对应于(多个)槽的(多个)词条来确定的。

背景技术

自动化助理(也称为“个人助理”、“移动助理”等)可以由用户经由各种客户端设备(诸如智能电话、平板计算机、可穿戴设备、汽车系统、独立的个人助理设备等)进行交互。自动化助理接收来自用户的输入(例如，键入和/或口头自然语言输入)，并用响应性内容(例如，视觉和/或听觉自然语言输出)进行响应。经由客户端设备进行交互的自动化助理可以经由客户端设备本身和/或经由与客户端设备(例如，“云”中的(多个)计算设备)进行网络通信中一个或多个远程计算设备来实施。

一些自动化助理与一个或多个代理(诸如第三方(3P)代理)交互。例如，一些自动化助理可以处理接收到的自然语言输入，以生成3P代理的代理命令，并将所生成的代理命令发送给3P代理。响应性内容可以由3P代理响应代理命令生成，并被用于提供响应于自然语言输入的输出。在一些情况下，自动化助理接收响应性内容并提供响应性内容(或其转换)作为响应性输出。在一些情况下，3P代理本身可以直接提供响应性内容，而不利用自动化助理作为中介。

在处理自然语言输入以生成代理命令时，一些自动化助理试图基于自然语言输入来确定与代理命令相关的(多个)槽的(多个)槽值。所确定的(多个)槽值可以被包括在代理命令中。通常，控制自动化助理的一方可以预定义可以由3P代理利用的槽。考虑到这种预定义的槽，执行自然语言输入的处理以生成槽值。然而，这种预定义的槽可能不适用于3P代理被配置为用于其的各种域和/或意图。例如，用于3P代理的期望槽可以不由任何预定义槽来定义，和/或可以由预定义槽中的一个或多个来过于概括和/或过于具体地定义。这可能限制各种3P代理的功能性和/或导致与3P代理的在计算方面负担沉重的过度交互，以解析之前已经由先前的自然语言输入指示的(多个)值。进一步，用于实现对(多个)新槽的(多个)槽值的处理的自动化助理的任何调整(例如，对新域的调整)可能需要执行大量的在计算方面负担沉重的训练，这些训练被具体化为(多个)新槽。由各种当前槽值确定技术呈现了附加和/或可替代的缺点。

发明内容

本说明书总体上涉及用于基于(多个)自然语言输入词条(token)和基于(多个)槽的(多个)描述符来确定代理命令的(多个)槽的(多个)槽值的方法、系统和计算机可读介质。槽的描述符可以是槽的文本描述符，诸如描述可以由槽的槽值定义的(多个)参数的标题和/或其他描述符。例如，“餐馆预订”域可以包括各种槽，诸如具有“人数”描述符的槽、具有“餐馆名称”描述符的另一槽、具有“预订日期”描述符的另一槽、具有“菜肴”描述符的另一槽、具有“预订时间”描述符的另一槽等。在一些实施方式中，在确定(多个)槽值时，可以使用除了(多个)槽的(多个)描述符之外的(多个)槽的(多个)附加特征。例如，除了槽的(多个)描述符之外或者代替槽的(多个)描述符，可以利用公共类型的槽的一个或多个特定词条。例如，对于具有“离开时间”描述符的槽，可以附加地利用(多个)特定词条，诸如<出发>和/或<时间>词条。