[发明专利]一种基于HoloLens的多人协同交互方法

摘要

本发明公开一种基于HoloLens的多人协同交互方法，包括指挥所本地多人协同交互和前后方多人异地协同交互两种模式，能够根据用户身份角色、操作习惯、交互动作趋势等进行自然人机交互的多人协同交互方法，提升系统自然、流畅的交互能力的同时增强态势感知的逼真度和沉浸感，智能高效地为指挥人员和参谋人员提供形象、直观的战场态势和可视化的信息交互界面，用于支撑不同级别作战人员、不同作战形式的未来先进指挥所协同指挥作业系统的构建。

主权项

一种基于HoloLens的多人协同交互方法，其特征在于：包括指挥所本地多人协同交互和前后方多人异地协同交互两种模式；所述指挥所本地多人协同交互模式下：指挥所内部署有Hololens集成设备，Hololens集成设备中的传感器将采集到的指挥员交互信息传输至人机交互服务器，人机交互服务器接收信息后生成相应交互指令并集成到全息投影设备，装载于全息投影设备上的全息电子沙盘程序对交互指令进行响应；指挥员查询作战阵地及作战目标的详细信息，后台的信息服务中心将结果反馈，并在指挥员佩戴的全息投影设备上全息显示；数据资源库提供战场环境数据、基础数据、实体数据、三维模型、操作数据和态势数据，最终实现多个指挥员之间通过态势同步服务器实现协同作业；所述前后方多人异地协同交互模式下：战前，战斗员通过穿戴式传感器进行战场感知和人员定位，后方指挥员综合全局战场态势形成战斗部署，战斗员以三维全息形式查看军事要素，了解作战意图；战斗过程中，战斗员通过音视频传感器将实际战场环境共享给指挥员，指挥员以此了解战斗过程感知战场态势变化，调整战术部署。