[发明专利]基于全息设备的多模态交互方法及系统

权利要求书

1.一种基于全息设备的多模态交互方法，其特征在于，所述方法包含以下步骤：

虚拟形象在移动设备运行，且所述虚拟形象具备预设形象特征和预设属性，通过所述移动设备和/或全息设备获取多模态输入数据，所述多模态输入数据可包含用户生物特征；

当捕捉到成像操作，或，将所述多模态输入数据传送至云端大脑解析以及计算，以在所述移动设备生成成像事件，并由所述移动设备控制所述全息设备显示所述虚拟形象的全息影像，以便与用户进行多模态交互；

在由所述移动设备控制所述全息设备显示所述虚拟形象的全息影像步骤前包含以下步骤：

检查无线连接成功；以及，

所述全息设备得电；以及，

所述移动设备与所述全息设备绑定成功；以及，

确保所述全息设备与所述移动设备连接成功；

在所述全息设备显示所述虚拟形象的全息影像的同时，开启所述全息设备的成像辅助部件，全息设备的成像辅助部件包含发光设备，发光设备通过灯光的改变配合全息影像的出现；

生成成像事件可由如下方式实现：

针对运行所述虚拟形象的程序开启；或，

所述虚拟形象被唤醒；或，

所述移动设备发生与成像事件关联的系统事件；

移动设备发生与成像事件关联的系统事件包含当程序接收到系统服务推送的成像消息时、当移动设备有电话以及短信接入时以及当移动设备后台服务检测到系统状态改变时都可以触发成像事件的执行，其中，系统状态改变包含电量变化以及温度变化；

移动设备的屏幕面对全息设备，并在屏幕上显示虚拟形象的影像，虚拟形象的影像为四个角度的视图，分别是前视图、后视图、左视图以及右视图。

2.如权利要求1所述的基于全息设备的多模态交互方法，其特征在于，所述多模态输入数据包括：

用户通过所述移动设备和/或所述全息设备输入的生物特征信息；或，

所述移动设备获取的针对运行所述虚拟形象的程序的开启信号；或，

所述全息设备获取的开关信号。

3.如权利要求1所述的基于全息设备的多模态交互方法，其特征在于，还包括：

通过所述云端大脑解析以及计算所述多模态输入数据，以决策生成多模态输出数据，且通过所述移动设备控制输出所述多模态输出数据，及所述全息影像输出所述多模态输出数据中的展示数据。

4.一种程序产品，其包含用于执行如权利要求1-3所述的方法步骤的一系列指令。

5.一种基于全息设备的多模态交互系统，其特征在于，执行如权利要求1-4中任一项所述的基于全息设备的多模态交互方法，所述系统包含：

移动设备，其上装载有虚拟形象，用于获取多模态输入数据，所述虚拟形象具备预设形象特征和预设属性，所述多模态输入数据可包含用户生物特征；

全息设备，其用于获取多模态输入数据以及将所述虚拟形象的影像转化为全息影像并显示所述全息影像；

云端大脑，其用于解析以及计算所述多模态输入数据，以在所述移动设备生成成像事件，并由所述移动设备控制所述全息设备显示所述虚拟形象的全息影像，以便与用户进行多模态交互。

6.一种虚拟形象，其特征在于，所述虚拟形象装载在如权利要求1所述的移动设备上，所述虚拟形象具备人类虚拟形象和预设属性，并由全息设备显示。

7.一种全息设备，其特征在于，所述全息设备包含：

通信装置，其用于接收如权利要求1所述的移动设备传输的虚拟形象的影像以及多模态输出数据；

成像装置，其与所述通信装置连接，用于将所述虚拟形象的影像转化为全息影像，并显示所述全息影像；

输出装置，其与所述通信装置以及所述成像装置连接，用于呈现所述全息影像及所述多模态输出数据中的展示数据。