[发明专利]一种车载人机交互方法、系统和具有该系统的车辆

说明书

本发明提供一种车载人机交互方法、系统和具有该系统的车辆，通过图像采集装置获取眼球信息，根据眼球信息在显示界面上的可操作项目中选定目标并将其激活，通过眼球交互准确的选定目标，实现目标的无感激活，提高下一步语音指令的准确度和可控制度，避免乘员持续长时间的注视；通过语音采集模块采集语音信息，生成控制指令，由处理模块进行分析处理并由控制模块执行相关操作；通过眼球交互和语音交互融合，缩小了单一时间点语音识别的内容的判定范围，操作简单，准确度高。

技术领域

本发明涉及车载人机交互系统技术领域，更具体地，涉及一种车载人机交互方法、系统和具有该系统的车辆。

背景技术

随着汽车的发展，车载终端的智能化程度越来越高，与用户进行交互也日益人性化。目前车载人机交互具有以下几种交互方式，一、基于按键或触控的肢体动作交互，此种交互方式需要视觉观察和手动控制，驾驶时注意力严重分散，存在安全隐患；通过多种功能开关按键需要大量的布置空间，导致开关间相互影响，无法保证人机交互的便捷性；二、基于语音识别或声源定位的声音交互，受限于语义识别和口音识别的难度，可应用的功能有限，主要集中在多媒体、空调和门窗等的基本功能控制，语音交互指令较复杂，需要表达功能的目标名称和动作指令，与人和人之间的自然交流存在较大差异，容易受到环境的干扰，包括环境噪音导致的语音不清晰、车内人员的交谈导致的误触发；三、基于眼球视线追踪定位的视觉交互，眼球视线定位难以做到精准，容易误操作。因此，需要一种新的车载人机交互系统及方法来解决上述问题。

发明内容

有鉴于此，本发明提供一种车载人机交互方法。

本发明还提供上述车载人机交互方法的车载人机交互系统。

本发明还提供一种具有上述车载人机交互系统的车辆。

为解决上述技术问题，本发明采用以下技术方案：

根据本发明第一方面实施例的车载人机交互方法，包括：

获取乘员的眼球信息，激活所述乘员注视方向的所在区域的选定目标，等待指令；

获取乘员的语音信息生成控制指令；

根据所述控制指令执行相应的操作。

进一步的，所述的获取乘员的眼球信息采用图像采集模块获取。

进一步的，所述图像采集模块为车内摄像头，所述眼球信息为眼球图像。

进一步的，所述的图像采集模块为具有眼球追踪器的摄像头。

进一步的，所述激活所述乘员注视方向的所在区域的选定目标包括根据所述眼球图像确定乘员的眼球位置和眼球偏转方向，将经眼球位置且与眼球偏转方向平行的直线与显示界面的交点所在的可操作项目作为所述选定目标。

进一步的，所述的语音信息通过语音采集模块获取。

进一步的所述的语音采集模块为车内麦克风。

根据本发明第二方面实施例的车载人机交互系统为根据上述实施例所述的车载人机交互方法的车载人机交互系统，包括：

至少一个图像采集模块，其被配置为采集乘员的眼球信息；

语音采集模块，其被配置为采集乘员的语音信息；

处理模块，其被配置为根据所述眼球信息在显示界面上的可操作项目中选定目标并将其激活，之后再根据所述语音信息生成控制指令；

控制模块，根据所述控制指令执行相应的操作。

进一步的，所述图像采集模块的输出端与所述处理模块的输入端相连，用于对所述乘员的眼球进行追踪，获取乘员的眼球信息，并将所述眼球信息发生至所述处理模块；