[发明专利]智能终端上应用程序的运行方法、智能终端和存储介质

说明书

本发明提供一种智能终端上应用程序的运行方法、智能终端和存储介质，其中方法包括：指令生成模块接收向智能终端进行输入的语音指令，并将语音指令转化为控制指令，控制指令至少包括两个相关联的子操作指令，子操作指令在智能终端中预先配置，预先配置按照候选序列配置；位置确定模块确定待运行的应用程序在智能终端的当前屏幕中的第一位置坐标；动作执行模块根据第一位置坐标对待运行的应用程序执行控制指令；在应用程序被控制指令启动之后，位置确定模块确定待执行的子操作指令在智能终端的当前屏幕中的第二位置坐标；动作执行模块根据第二位置坐标在应用程序中执行子操作指令的预先配置。本发明实现了应用及其内部跨页面的语音控制功能。

技术领域

本发明涉及语音控制技术领域，尤其涉及一种智能终端上应用程序的运行方法、智能终端和存储介质。

背景技术

在智能移动终端上运行的应用（Application，APP），通常需要用户手动操作来实现对应用内部页面的控制。例如，为了实现某一功能，需要通过多次点击应用各个页面的功能按钮，经过层层界面，最终进入该功能对应的页面。然而，在一些应用场合中，通过手动操作来控制应用会存在一定的不便。例如，用户处于驾驶等双手被占用的状态时，若通过手动操作来控制导航软件，特别是输入文字等较为复杂的手动操作时，容易分散用户精力，带来安全隐患。此外，对于智能移动终端使用不熟练的用户，上述复杂操作也会大大增加应用控制的难度。

因此，亟需一种智能终端上应用程序的运行方法，通过语音的方式实现应用跨页面的自动控制，克服手动操作带来的不便性。

发明内容

本发明提供一种智能终端上应用程序的运行方法、智能终端和存储介质，用以解决现有技术中手动操作带来的不便性。

本发明提供一种智能终端上应用程序的运行方法，所述智能终端至少包括一个服务项，所述服务项中包括指令生成模块、位置确定模块、动作执行模块，所述动作执行模块用于根据所述位置确定模块执行所述指令生成模块中的控制指令，所述方法包括：

所述指令生成模块接收向智能终端进行输入的语音指令，并将所述语音指令转化为控制指令，其中，所述控制指令至少包括两个相关联的子操作指令，所述子操作指令在所述智能终端中预先配置，所述预先配置按照候选序列配置；

所述位置确定模块确定待运行的应用程序在所述智能终端的当前屏幕中的第一位置坐标；

所述动作执行模块根据所述第一位置坐标对所述待运行的应用程序执行所述控制指令；

在所述应用程序被所述控制指令启动之后，所述位置确定模块确定待执行的所述子操作指令在智能终端的当前屏幕中的第二位置坐标；

所述动作执行模块根据所述第二位置坐标在所述应用程序中执行所述子操作指令的所述预先配置。

根据本发明提供的一种智能终端上应用程序的运行方法，所述位置确定模块确定待执行的所述子操作指令在智能终端的当前屏幕中的第二位置坐标，具体包括：

所述位置确定模块将所述控制指令与当前运行应用对应的候选控件序列的功能描述文本进行匹配，得到所述控制指令对应的子操作指令序列；

所述位置确定模块将所述子操作指令序列中的当前子操作指令与当前屏幕控件进行匹配，得到所述当前子操作指令的第二位置坐标以及待跳转的子操作指令，并将所述待跳转的子操作指令作为当前子操作指令，直至所述待跳转的子操作指令为空。

根据本发明提供的一种智能终端上应用程序的运行方法，

所述位置确定模块将所述子操作指令序列中的当前子操作指令与当前屏幕控件进行匹配，得到所述当前子操作指令的第二位置坐标以及待跳转的子操作指令，具体包括：

依次将所述当前子操作指令的目标控件标识序列中的每一目标控件标识与控件信息集合中的控件标识匹配；