[发明专利]一种安全性高的基于动作行为的列车人机语音交互系统

权利要求书

1.一种安全性高的基于动作行为的列车人机语音交互系统，包括语音采集模块(1)、动作行为采集摄像模块(2)、情绪采集摄像模块(3)、车载主机(7)和大数据模块(10)，其特征在于：所述语音采集模块(1)的输出端与语音识别模块(4)的输入端电性连接，所述动作行为采集摄像模块(2)的输出端与动作行为识别模块(5)的输入端电性连接，所述情绪采集摄像模块(3)的输出端与情绪识别模块(6)的输入端电性连接，所述语音识别模块(4)的输出端、动作行为识别模块(5)的输出端和情绪识别模块(6)的输出端均与车载主机(7)的输入端电性连接，所述车载主机(7)的输出端分别与扬声器模块(8)的输入端和报警模块(9)的输入端电性连接；

所述车载主机(7)亦与大数据模块(10)双向网络连接；

所述车载主机(7)亦通过无线网络模块(11)与列车监控中心(12)双向网络连接。

2.根据权利要求1所述的一种安全性高的基于动作行为的列车人机语音交互系统，其特征在于，所述语音识别模块(4)包括音色识别单元(401)、音量识别单元(402)和音调识别单元(403)，所述音色识别单元(401)用于识别驾驶员语音的音色，所述音量识别单元(402)用于识别驾驶员语音的音量，所述音调识别单元(403)用于识别驾驶员语音的音调。

3.根据权利要求1所述的一种安全性高的基于动作行为的列车人机语音交互系统，其特征在于，所述动作行为识别模块(5)包括肢体动作识别单元(501)和口型动作识别单元(502)，所述肢体动作识别单元(501)用于识别动作行为采集摄像模块(2)采集到视频中的肢体动作特征，所述口型动作识别单元(502)用于识别动作行为采集摄像模块(2)采集到视频中的口型动作特征。

4.根据权利要求1所述的一种安全性高的基于动作行为的列车人机语音交互系统，其特征在于，所述情绪识别模块(6)包括面部表情识别单元(601)和瞳孔识别单元(602)，所述面部表情识别单元(601)用于识别情绪采集摄像模块(3)采集到视频中的面部表情特征，所述瞳孔识别单元(602)用于识别情绪采集摄像模块(3)采集到视频中的人体瞳孔特征。

5.根据权利要求1所述的一种安全性高的基于动作行为的列车人机语音交互系统，其特征在于，所述车载主机(7)对经语音识别模块(4)、动作行为识别模块(5)和情绪识别模块(6)提取的特征进行编码，并调取大数据模块(10)中语音、动作行为以及情绪的模型，两者相比较，进而更加精确的得到语音指令的内容，同时通过语音、行为动作判断是否为驾驶员本人，通过面部表情和瞳孔判断驾驶员是否疲劳、带情绪驾驶。

6.根据权利要求1所述的一种安全性高的基于动作行为的列车人机语音交互系统，其特征在于，所述大数据模块(10)内存储有每个驾驶员的音色、音量、音调、肢体动作、口型动作、面部表情和瞳孔数据模型。