[发明专利]一种基于儿童应用中的人机交互辅助系统及交互方法

权利要求书

1.一种基于儿童应用中的人机交互方法，其特征在于，包括步骤：

A、预先在操作终端上定义用于进行交互进而触发相应操作的多种图标，每一种操作图标与一操作命令对应；所述图标包括用于进行交互的图形，图像，语音，UI和文字元素中的一种或多种操作图标；

B、在操作终端的屏幕上显示用于进行交互的图形，图像，语音，UI和文字元素中的一种或多种操作图标，在儿童操作过程中需要进行交互时，通过所述图形，图像，语音，UI和文字元素中的一种或多种操作图标接收用户的操作指令触发相应的操作命令，并把所述相应的操作命令形成相应的操作命令数据，发送到服务器进行分析；

C、服务器接收到来自操作终端的操作命令数据，根据操作终端当前界面的所有的所述操作命令数据进行上下文的分析，分析当前界面的动作，语音及操作顺序和停留时间来判断儿童可能需要的操作，通过和数据库中的特定模式进行比较来判断需要进行的辅助操作，并反馈相应的辅助操作指令给操作终端；

D、操作终端接到服务器的反馈的相应的辅助操作指令并进行解析，将解析的结果通过所述图形，图像，语音，UI和文字元素中的一种或多种操作图标反馈信息呈现给儿童。

2.根据权利要求1所述基于儿童应用中的人机交互方法，其特征在于，所述相应的操作命令包括动作输入命令或者语音输入命令。

3.根据权利要求1所述基于儿童应用中的人机交互方法，其特征在于，所述步骤C还包括：

C1、服务器数据库中会根据当前的游戏或者应用来进行预设置，预设置包括：在哪些界面儿童会有哪些可能的动作输入、可能的语音输入、可能的动作顺序及可能匹配的操作；并按照可能性权重进行优先级排序；

C2、服务器把优先级最高的匹配操作通过预制的语音和/或动作数据反馈给操作终端。

4.根据权利要求1所述基于儿童应用中的人机交互方法，其特征在于，所述步骤D还包括：

操作终端接收到服务器反馈相应的辅助操作指令后，解析反馈的辅助操作指令数据，如果有语音反馈则播放该语音提示，如果有动作反馈则在该界面执行该动作使UI发生变化，如果有文字反馈则在该界面显示文字提示。

5.根据权利要求1所述基于儿童应用中的人机交互方法，其特征在于，所述操作终端为手持终端，包括手机或IPAD。

6.一种基于儿童应用中的人机交互辅助系统，其特征在于，包括：

预先定义模块，用于预先定义用于在进行交互进触发相应操作多种图标，每一种操作图标与一操作命令对应；所述图标包括用于进行交互的图形，图像，语音，UI和文字元素中的一种或多种操作图标；

显示与接收控制模块、用于控制在屏幕上显示用于进行交互的图形，图像，语音，UI和文字元素中的一种或多种操作图标，在儿童操作过程中需要进行交互时，通过所述图形，图像，语音，UI和文字元素中的一种或多种操作图标接收用户的操作指令触发相应的操作命令，并把所述相应的操作命令形成相应的操作命令数据；

服务器分析控制模块，用于控制接收所述操作命令数据，并根据所述操作命令数据进行上下文的分析，分析当前界面的动作，语音及操作顺序和停留时间来判断儿童可能需要的操作，通过和数据库中的特定模式进行比较来判断需要进行的辅助操作，并反馈相应的辅助操作指令给操作终端；

解析与显示控制模块、用于接收反馈的相应的辅助操作指令并进行解析，将解析的结果通过所述图形，图像，语音，UI和文字元素中的一种或多种操作图标反馈信息呈现给儿童。

7.根据权利要求6所述基于儿童应用中的人机交互辅助系统，其特征在于，所述相应的操作命令包括动作输入命令或者语音输入命令；

预先定义模块、显示与接收控制模块、解析与显示控制模块设置在操作终端；

所述服务器分析控制模块设置在服务器上。

8.根据权利要求6所述基于儿童应用中的人机交互辅助系统，其特征在于，所述服务器分析控制模块包括：

预设置单元、用于控制服务器数据库根据当前的游戏或者应用来进行预设置，预设置包括：在哪些界面儿童会有哪些可能的动作输入、可能的语音输入、可能的动作顺序及可能匹配的操作；并按照可能性权重进行优先级排序；

反馈控制单元、用于控制服务器把优先级最高的匹配操作通过预制的语音和/或动作数据反馈给操作终端。