[发明专利]自动辅助动作执行和/或后台应用请求的动态延迟

说明书

本文中阐述的实现方式允许用户访问图形界面的前台的第一应用，并同时采用自动化助理响应于源自第二应用的通知。用户可以在查看前台的第一应用时，提供诸如口头话语之类的输入，以便响应于来自第二应用的通知而不用执行可以在某些情况下出现的某些干预步骤。这种干预步骤可以包括提供可以响应于用户提供针对通知的响应性输入而显示的可以被绕过的和/或根据定时器时间受限制的用户确认。可以根据与通知、用户和/或任何其他可以与用户接收到通知关联的信息关联的一种或多种特性来设置定时器的时段。

背景技术

人类可以参与与本文中被称为“自动化助理”(也被称为“数字代理”、“聊天机器人”、“交互式个人助理”、“智能个人助理”、“助理应用”、“会话代理”等)的交互式软件应用的人-机对话。例如，人类(当他们与自动化助理交互时，可以被称为“用户”)可以使用在某些情况下可以被转换成文本然后被处理的口头自然语言输入(即，口头话语)和/或通过提供文本(例如，键入的)自然语言输入来向自动化助理提供命令和/或请求。自动化助理可以通过提供响应性用户界面输出来响应于请求，该响应性用户界面输出可以包括可听和/或可视的用户界面输出。

当用户正在操作其他应用时，自动化助理可能具有有限可用性会。结果，用户可能试图调用自动化助理来执行用户与其他应用关联的某些功能，但最终在自动化助理无法继续时，终止与自动化助理的对话会话。例如，自动化助理的有限可用性或有限功能可能意味着用户不能够借助经由自动化助理处理的声音命令来控制其他应用。这可能浪费诸如网络和处理带宽之类的计算资源，因为在对话会话期间对口头话语的任何处理都将不导致任何动作的执行。此外，因为该缺陷，在用户与他们相应的自动化助理交互时，用户可以避免操作可以以其他方式为用户执行的各种任务提供效率的其他应用。这样的任务的示例是经由安装在用户的计算设备上的应用来控制诸如加热系统、空调系统或其他气候控制系统之类的单独的硬件系统。这样的避免可以造成诸如智能恒温器和硬件系统内的其他受应用控制的设备之类的可能以其他方式由这种应用辅助的任何设备以及可能受益于这种应用或其对关联设备的控制的任何人员的低效。

此外，许多系统可以假定在访问应用的同时调用自动化助理为用户不再对与应用的进一步交互感兴趣的指示，并使应用暂停某些操作或关闭。当用户实际上正打算使自动化助理执行与该应用和/或另一应用相关的动作时，这可能浪费计算资源。在这种情形下，先前在与应用交互期间生成的任何数据可能丢失，由此迫使用户重新初始化应用和/或重复用应用进行的任何先前操作。

发明内容

本文中阐述的一些实现方式可选地在客户端设备本地自动确定自动执行辅助动作的延迟。如本文中使用的，动作的“自动执行”可以意味着执行辅助动作，而首先并不需要明确的确认性用户界面输入。可以基于在实现了自动化助理的至少部分(例如，单独的和/或经由与一个或多个远程自动化助理部件交互)的客户端设备的自动化助理界面处提供的用户界面输入(例如，口头话语)来生成助理动作。在延迟期间，可以提供进一步的用户界面输入，以防止和/或修改辅助动作的执行。然而，在没有这样阻止用户界面输入的情况下，可以发生辅助动作的自动执行。基于取决于用户界面输入的一个或多个动态考虑因素来动态确定延迟的持续时间。例如，当用户输入是口头话语时，延迟的持续时间可以是基于一个或多个置信度度量，在一些实现方式中，置信度度量可以是基于口头话语的语音-文本转换。因此，延迟的持续时间可以是基于确定动作和/或动作的时隙值时利用的项的置信度度量。另外，例如，延迟的持续时间可以另外地或替代地基于：针对动作的并从口头话语中确定的时隙值的长度；时隙值的历史可能性(跨用户群体和/或针对用户)；作为动作和/或时隙值的基础的口头话语的自然语言内容的共同性；在提供口头话语时用户和/或设备的位置；以及表征其中提供了口头话语的场境(context)的事件和/或其他信息。