[发明专利]一种基于全息投影设备的虚拟形象交互方法及系统

说明书

技术领域

本申请涉及人工智能技术领域，特别涉及一种基于全息投影设备的虚拟形象交互方法及系统、一种虚拟形象及一种计算机可读存储介质。

背景技术

全息投影技术(front-projected holographic display)也称虚拟成像技术是利用干涉和衍射原理记录并再现物体真实的三维图像的技术。全息投影技术不仅可以产生立体的空中幻象，还可以使幻象与表演者产生互动，一起完成表演，产生令人震撼的演出效果。

随着人工智能的不断发展，虚拟机器人也从简单重复的机械动作也提升为具有拟人问答、自主性及与其他机器人进行交互的智能机器人。

虚拟机器人包括具备实体的实体机器人和搭载在硬件设备上的虚拟机器人。但是，目前的虚拟机器人无法进行多模态交互，同时呈现真实的三维图像。

因此，如何将全息投影技术与人工智能进行结合，以此来提升虚拟机器人的交互能力和呈现能力，是现在亟需解决的重要问题。

发明内容

有鉴于此，本申请提供一种基于全息投影设备的虚拟形象交互方法及系统、一种虚拟形象及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。

一方面，本申请提供一种基于全息投影设备的虚拟形象交互方法，所述虚拟形象在所述移动设备运行，且所述虚拟形象具备预设形象特征和预设属性，所述方法包括：

通过移动设备和/或成像设备获取多模态输入数据；

由云端服务器解析所述多模态输入数据并获取解析结果，所述解析包括：自然语言理解、视觉感知、触摸感知、语言语音输出和情感计算；

根据所述解析结果确定多模态输出数据；

所述移动设备控制所述多模态输出数据的输出，并由所述成像设备显示所述虚拟形象。

可选地，所述移动设备与所述成像设备物理位置参照对齐，以实现所述移动设备与所述成像设备的信号互联。

可选地，所述移动设备控制所述多模态输出数据的输出包括：

所述移动设备控制所述虚拟形象的虚拟形象以嘴型、表情和/或肢体动作呈现所述多模态输出数据。

可选地，所述成像设备显示所述虚拟形象包括：

所述成像设备基于所述多模态输出数据显示所述虚拟形象。

可选地，所述多模态输入数据包括：

语音数据、文本数据、触摸数据、视觉数据和环境数据。

可选地，根据所述解析结果确定多模态输出数据包括：

当所述解析结果为技能展示时，所述虚拟形象的多模态输出数据包括歌曲演唱数据和/或舞蹈表演数据。

另一方面，本申请还提供一种基于全息投影设备的虚拟形象交互系统，包括移动设备、成像设备和云端服务器，所述虚拟形象在所述移动设备运行，且所述虚拟形象具备预设形象特征和预设属性，其中，

所述移动设备和/或所述成像设备获取多模态输入数据；

所述云端服务器解析所述多模态输入数据并获取解析结果，所述解析包括：自然语言理解、视觉感知、触摸感知、语言语音输出和情感计算；

所述移动设备根据所述解析结果确定多模态输出数据；

所述移动设备控制所述多模态输出数据的输出，并由所述成像设备显示所述虚拟形象。

可选地，所述移动设备还可以控制所述虚拟形象的虚拟形象以嘴型、表情和/或肢体动作呈现所述多模态输出数据。

另一方面，本申请还提供一种虚拟形象，所述虚拟形象在移动设备运行，并由成像设备显示所述虚拟形象；

所述移动设备与所述成像设备物理位置参照对齐，以实现所述移动设备与所述成像设备的信号互联；

所述虚拟形象执行上述基于全息投影设备的虚拟形象交互方法的步骤。

另一方面，本申请还提供一种计算机可读存储介质，其存储有计算机程序，该程序被处理器执行时实现上述基于全息投影设备的虚拟形象交互方法的步骤。

本申请提供的一种基于全息投影设备的虚拟形象交互方法及系统、一种虚拟形象及一种计算机可读存储介质，其中，所述方法包括：所述虚拟形象在所述移动设备运行，且所述虚拟形象具备预设形象特征和预设属性，通过移动设备和/或成像设备获取多模态输入数据，由云端服务器解析所述多模态输入数据并获取解析结果，根据所述解析结果确定多模态输出数据，所述移动设备控制所述多模态输出数据的输出，并由所述成像设备显示所述虚拟形象，使得虚拟形象可以采用全息投影设备呈现，虚拟形象的立体感更强，实现流畅的多模态人机交互，极大的增强了用户体验。

附图说明