[发明专利]一种基于虚拟现实的言语失用症康复训练方法

说明书

本发明公开了一种基于虚拟现实的言语失用症康复训练方法。本发明方法采用头显设备和计算机：头显设备包括内置有定位模块的头戴式显示器和手柄；计算机与头显设备连接，提供康复训练虚拟场景的画面。该方法包括：通过计算机将言语失用症康复训练画面传输到头显设备，使用者通过手柄与虚拟物品进行交互，学习虚拟场景中物品的发音；计算机将虚拟人嘴型画面传输到头显设备，使用语音在虚拟场景中与虚拟人进行交互，学习完成后进入训练模块虚拟场景；使用者用语音在虚拟场景中与虚拟物品进行交互，获得训练分数信息，计算机实时获取头戴式显示器、手柄的反馈信息。本发明方法减少了言语失用症康复训练的成本、提高了患者训练的积极性和治疗效果。

技术领域

本发明涉及虚拟康复训练技术领域，具体涉及一种基于虚拟现实的言语失用症康复训练方法。

背景技术

言语失用是不能执行自主运动进行发音和言语的活动，而且这种异常是在缺乏或者不能用言语肌肉的麻痹、不协调或肌力减弱来解释的一种运动性言语障碍。这种疾病的主要特征就是患者在生活中失去了语言表达的能力，给患者的生活带来了很大的压力，同时也影响了患者的健康，因此言语失用患者的康复治疗显得尤为重要。传统的康复治疗方法通常是在医院由康复师制定康复计划，利用医疗康复器材进行被动式辅助性康复训练，其康复治疗过程单调、枯燥，用户难以产生兴趣，治疗效果也不尽人意。

近年来，随着虚拟现实技术的广泛应用，将虚拟现实技术引入语言康复训练中已成为研究热点。虚拟现实技术由软件提供多种训练场景，如同置身于游戏之中，在用户使用虚拟现实技术进行康复训练时，可以明显地感受到自己在动作技能、肌肉张力等方面的提高，使治疗过程充满乐趣，提高用户的乐观情绪。

发明内容

本发明的目的就是提供了一种基于虚拟现实的言语失用症康复训练方法，该方法使用先进的虚拟现实技术，减少康复训练的成本、增加康复训练的趣味性。

本发明方法采用的康复训练设备，包括：

头显设备，包括头戴式显示器、与所述头戴式显示器无线交互的手柄；所述头戴式显示器和手柄均内置有定位模块，所述的定位模块用于空间内同时追踪头戴式显示器与手柄的定位；

计算机，与所述头显设备连接；计算机为头显设备提供康复训练虚拟场景的画面，虚拟场景包括：言语失用康复室场景、学习虚拟人嘴型和发音场景、康复训练场景；

在言语失用康复室场景中，使用者通过与场景中虚拟物品的交互，学习场景中每个物品的读音；

在学习虚拟人嘴型和发音场景中，使用者跟随虚拟人的嘴型和发音，学习汉语拼音字母、字、词、句，如果检测到使用者读音正确，则会出现显示正确的提示界面；否则出现显示错误的提示界面；

在康复训练场景中，使用者与场景中展示的虚拟物品进行语音交互，如果计算机检测到读音与所示物品的读音相同，则会出现显示正确的提示界面；否则出现显示错误的提示界面，并且播放物品的正确读音。

该方法的具体包括：

1.计算机将言语失用症康复训练画面传输到头显设备，提供言语失用症康复训练虚拟场景，使用者用手柄在虚拟康复训练中与虚拟物品进行交互，学习虚拟场景中物品的发音，点击学习按钮进入学习模块虚拟场景；

2.计算机将虚拟人嘴型画面传输到头显设备，提供学习的虚拟场景，使用者用语音在虚拟场景中与虚拟人进行交互，学习完成后，点击训练按钮进入训练模块虚拟场景；

使用者用语音在虚拟场景中与虚拟人进行交互，采用音素识别器将输入的语音转换为音素输入；所述的音素为语言的最小可分单元，采用实时音素识别器将输入的语音实时转换为音素；具体方法如下：