[发明专利]视听双模态语义匹配和语义失配协同刺激脑机接口方法

摘要

本发明涉及脑机接口(BCI)范式，为提出一种新的BCI视听觉双模态刺激范式，为研究在脑‑机接口范式下大脑对视听觉协同关系的响应机制奠定基础。从而可以有助于更深层次理解大脑对视听刺激的反应机制及完善视听双模态脑‑机接口系统，并有望获得可观的社会效益和经济效益。本发明采用的技术方案是，视听双模态语义匹配和语义失配协同刺激脑机接口范式，采集不同刺激范式下的行为学数据和脑电信号，通过对行为学数据分析、脑电信号特征的提取和分析、不同范式下目标刺激与非目标刺激的分类等实现脑控命令的输出。本发明主要应用于脑机接口场合。

主权项

1.一种视听双模态语义匹配和语义失配协同刺激脑机接口方法，其特征是，采集不同刺激范式下的行为学数据和脑电信号，通过对行为学数据分析、脑电信号特征的提取和分析、不同范式下目标刺激与非目标刺激的分类实现脑控命令的输出；视听双模态语义匹配和语义失配协同刺激范式中视觉刺激分为两种，一种是不同颜色的大写字母，称为“语音相关”刺激方式；另一种视觉刺激为不同颜色不同形状的几何图形呈现，称为“语音无关”刺激方式；听觉刺激拟统一选取对应的单音节语音刺激；视觉刺激通过电脑显示器呈现在屏幕的中央位置，听觉刺激则通过耳机输出到左右双耳，被试需要同时注意视觉刺激与听觉刺激，数据的采集过程包括对行为学数据的采集和对脑电数据的采集，在不进行脑电采集的情况下需要对视觉和听觉目标刺激进行按键反应，以采集被试的分类正确率和反应时间特征，脑电信号采集时通过64导脑电采集系统采集被试进行视听双模态各范式下的脑电信号；行为学数据包括被试按键反应数据和被试任务相关量表主观打分，按键反应由Eprime软件采集，主观量表打分则以问卷形式提供。