[发明专利]一种基于眼动、语音和触屏多模式交互的问卷测试系统和方法

权利要求书

1.一种基于眼动、语音和触屏多模式交互的问卷测试系统，包括：带内置问卷测试软件、具有触摸屏输入功能的计算机(1)，其特征是：还包括眼动采集装置(2)和语音输入装置(5)；

所述眼动采集装置(2)通过固定装置(3)固定在所述计算机(1)上，通过USB连接线(4)与所述计算机(1)连接；

所述语音输入装置(5)带有底盘(6)，置于被测试人员与所述计算机(1)之间靠近被测试人员处，通过音频连接线(7)与所述计算机(1)连接。

2.一种基于眼动、语音和触屏多模式交互的问卷测试方法，它使用如权利要求1所述的基于眼动、语音和触屏多模式交互的问卷测试系统，并包括以下步骤：

A、被测试人员就位

被测试人员位于所述语音输入装置(5)前，正对所述计算机(1)的触摸屏，触屏点击打开问卷测试软件或集成有问卷测试软件的其他测试程序；

B、语音输入检测与眼动识别定标

B1、所述问卷测试软件在测试开始前进行语音输入检测，要求被测试人员语音输入屏幕显示的文字，连续进行2次检测，若2次语音输入都成功，则语音输入满足要求，进入B2步骤；否则，通过所述计算机(1)屏幕提示被测试人员检查语音输入装置(5)，并重复B1步骤；

B2、问卷测试软件实时接收所述眼动采集装置(2)的信号，在测试开始前进行眼动识别定标，令被测试者注视屏幕白色底色上的黑色圆点，注视点随黑色圆点移动，对分布在全屏幕各个部分的5个关键点定标完成后，进行眼动检测，要求被测试人员注视屏幕上随机位置依次出现的三个黑色圆点，若眼动采集装置(2)检测的三个注视点与实际显示注视点都相同，则进入C步骤；否则，重复B2步骤；

C、自动呈现测试条目以及自动记录被测试者反馈的答案

被测试者眼动注视实现点击功能，判断依据为：若注视一区域超过3秒钟，视为对该区域对应选项进行一次点击；与触屏交互具有同样的点击效果；被测试者用语音输入可取代键盘文字输入操作；

所述问卷测试软件依次呈现测试条目，实时接收所述眼动采集装置(2)采集的眼注视点信息，并判断是否进行点击操作；客观选择题目通过眼动注视或触屏交互的点击操作选择答案；主观作答题目在点击文字输入区域后，文字输入区域提示开始输入，此时通过所述语音输入装置(5)进行文字信息输入；其他一些诸如上一题、下一题、结束测试之类需要点击的功能按钮也通过眼动注视或触屏交互的点击操作激活相应按键功能。