[发明专利]一种基于AI的沉浸式言语反馈训练系统

说明书

本发明公开了一种基于AI的沉浸式言语反馈训练系统，包括能力评级模块、分级学习模块、标准库、影视播放模块、声音辨识模块、影像采集模块、数据接收模块、数据处理模块、学习评分模块与评分展示模块；所述能力评级模块用于对语言障碍患者进行语音能力的评级，并生成语音评级信息，语音评级信息被发送到分级学习模块，所述分级学习模块接收到语音评级信息从标准库中调取对应级别的学习影视，所述标准库储存着不同等级的训练影视信息；所述影视播放模块用于接收分级学习模块控制标准库发送出对应级别的影视信息，影视播放模块接收到对应级别的影视信息后开始播放。本发明能够更好的帮助和促进语言障碍者进行康复训练。

技术领域

本发明涉及语言训练领域，具体涉及一种基于AI的沉浸式言语反馈训练系统。

背景技术

言语与语言发育障碍指在发育早期就有正常语言获得方式的紊乱，表现为发音、语言理解，或语言表达能力发育的延迟和异常，这种异常影响学习、职业和社交功能。这些情况并非因神经或言语机制的异常、感觉缺损、精神发育迟滞或周围环境因素所致，在进行语言障碍的康复过程中会使用到言语反馈训练系统进行辅助康复训练。

现有的言语反馈训练系统，在使用过程中，功能单一，导致其训练效果较差，不能满足使用者的使用需求，给言语反馈训练系统的使用带来了一定的影响，因此，提出一种基于AI的沉浸式言语反馈训练系统。

发明内容

本发明所要解决的技术问题在于：如何解决现有的言语反馈训练系统，在使用过程中，功能单一，导致其训练效果较差，不能满足使用者的使用需求，给言语反馈训练系统的使用带来了一定的影响的问题，提供了一种基于AI的沉浸式言语反馈训练系统。

本发明是通过以下技术方案解决上述技术问题的，本发明包括能力评级模块、分级学习模块、标准库、影视播放模块、声音辨识模块、影像采集模块、数据接收模块、数据处理模块、学习评分模块与评分展示模块；

所述能力评级模块用于对语言障碍患者进行语音能力的评级，并生成语音评级信息，语音评级信息被发送到分级学习模块，所述分级学习模块接收到语音评级信息从标准库中调取对应级别的学习影视，所述标准库储存着不同等级的训练影视信息；

所述影视播放模块用于接收分级学习模块控制标准库发送出对应级别的影视信息，影视播放模块接收到对应级别的影视信息后开始播放，所述声音辨识模块此时采集语言障碍患者发出的语音信息，同时影像采集模块运行采集语言障碍患者发出语音信息时的嘴部动作信息；

所述语言障碍患者发出的语音信息与语言障碍患者发出语音信息时的嘴部动作信息均被发送到数据接收模块，所述数据接收模块对接收到的语言障碍患者发出的语音信息与语言障碍患者发出语音信息时的嘴部动作信息进行处理，生成语音比对信息与动作比对信息；

所述语音比对信息与动作比对信息均被发送到学习评分模块，所述学习评分模块对语音比对信息与动作比对信息进行处理生成训练评分信息，所述训练评分信息被发到评分展示模块，所述评分展示模块用于进行训练评分展示。

优选的，所述能力评级模块对语言障碍患者进行能力评级的具体过程如下：

步骤一：能力评级模块中预设了不同等级的文字内容信息，包括初级文字、中级文字信息、高级文字信息与正常文字信息，其难度大小如下：初级文字＜中级文字信息＜高级文字信息＜正常文字信息；

步骤二：从初级文字、中级文字信息、高级文字信息与正常文字信息中从正常到高级依次选取至少x组文字信息，x≥5；

步骤三：将从初级文字、中级文字信息、高级文字信息与正常文字信息中均选取的x组文字信息进行展示，语言障碍患者依次读出初级文字中的x组文字信息、中级文字信息中的x组文字信息、高级文字信息中的x组文字信息与正常文字信息中的x组文字信息，将其读音按照等级顺序从低到分别标记为K1、K2、K3与K4；