[发明专利]一种多模态成像与多感知交融的增强现实系统及其应用

摘要

本发明公开了一种多模态成像与多感知交融的增强现实系统及其应用，其特点是该系统由多模态成像模块、多层感知模块、辅助传感模块和控制终端组成，所述多模态成像模块和辅助传感模块将获取的周边环境信息输入控制终端，并由控制终端将处理后的图像流和数据流反馈至多层感知模块进行全面精准的传递，并通过麦克风与系统进行交互，利用该增强现实系统架构的增强现实眼镜用于智能执法、视障辅助和驾驶辅助，实现使用者对周边环境的全方位精准可靠的感知。本发明与现有技术相比具有多模态成像与多层感知的交互融合，实现应用场景下有效信息的准确获取和精准传递，以满足智能执法、视障辅助、辅助驾驶等不同环境下的应用需求，使用方便，可靠性高。

主权项

1.一种多模态成像与多感知交融的增强现实系统，其特征在于该增强现实系统由多模态成像模块、多层感知模块、辅助传感模块和控制终端组成，所述多模态成像模块由可见光/近红外相机、深度相机、远红外热像仪、近红外点阵光源、点阵激光器和栅栏状激光器构成；所述多层感知模块由触感发生器、气体喷射器、振动发生器、骨传导耳机和OLED显示屏构成；所述辅助传感模块由陀螺仪、超声波测距传感器、红外测距传感器和麦克风构成；所述控制终端由传输模块和微处理器构成；所述多模态成像模块和辅助传感模块将获取的周边环境信息输入控制终端，并由控制终端将处理后的图像流和数据流反馈至多层感知模块，通过触感发生器、气体喷射器、振动发生器、骨传导耳机和OLED显示屏进行全面精准的传递，使用者通过反馈的信息做出相应的行为决策，并通过麦克风与增强现实系统进行交互。