[发明专利]一种APP语音控制方法、系统和计算机设备

权利要求书

1.一种APP语音控制方法，其用于通过语音控制客户端APP完成操作，其特征在于，所述方法包括：

建立用户操作数据库，该用户操作数据库用于记录用户通过手指操作使用APP期间的历史操作数据；

在用户打开客户端APP时，APP自动开启语音输入功能；

通过APP接收用户的语音输入，并对该输入的语音进行识别，以转换成当前操作指令；

判断该当前操作指令所要执行的操作是否是特定操作；

在判断所述要执行的操作是特定操作时，根据所述用户操作数据库记录的历史操作数据计算当前操作指令的参数，并自动根据该当前操作指令及其参数执行相应的操作。

2.根据权利要求1所述的APP语音控制方法，其特征在于，所述操作包括点击、双击、滑动、输入和长按，所述特定操作包括向左滑动、向右滑动、向上滑动和向下滑动。

3.根据权利要求2所述的APP语音控制方法，其特征在于，

所述历史操作数据包括历史滑动操作数据；

当所述当前操作指令为向左滑动、向右滑动、向上滑动或向下滑动时，该当前操作指令的参数包括滑动起点位置和滑动终点位置。

4.根据权利要求3所述的APP语音控制方法，其特征在于，当所述当前操作指令为向左滑动、向右滑动、向上滑动或向下滑动时，根据多个历史滑动操作数据计算当前操作指令的所述滑动起点位置和所述滑动终点位置的平均值，作为当前操作指令的参数。

5.根据权利要求1所述的APP语音控制方法，其特征在于，

当所述用户操作数据库没有记录特定操作的历史操作数据时，将预定的缺省参数作为当前操作指令的参数，并自动根据该当前操作指令及其参数执行相应的操作。

6.根据权利要求5所述的APP语音控制方法，其特征在于：

当所述要执行的操作是向左滑动或向右滑动时，所述缺省参数是屏幕宽度；

当所述要执行的操作是向上滑动或向下滑动时，所述缺省参数是屏幕高度。

7.根据权利要求1所述的APP语音控制方法，其特征在于，根据所述用户操作数据库记录的历史操作数据计算当前操作指令的参数包括：

使用所述历史操作数据训练机器学习模型，使用该训练好的机器学习模型计算当前操作指令的参数，其中，

所述历史操作数据还包括操作环境数据；

所述机器学习模型计算当前操作指令的参数时还根据当前的操作环境数据进行计算。

8.根据权利要求7所述的APP语音控制方法，其特征在于，操作环境数据包括操作的时间、地理位置、前后操作指令中的至少一项。

9.根据权利要求1所述的APP语音控制方法，其特征在于，所述对该语音输入进行识别包括：

从语音输入中识别出行为信息和目标信息，该行为信息包括点击行为、双击行为、滑动行为、输入行为和长按行为，该目标信息包括与操作行为相对应的按钮、选项、输入框。

10.根据权利要求1所述的APP语音控制方法，其特征在于，还包括：

在判断当前操作指令所要执行的操作不是特定操作时，直接自动执行所述操作。

11.根据权利要求1所述的APP语音控制方法，其特征在于，还包括：

所述语音输入功能是通过配合使用Android无障碍辅助功能而实现的。