[发明专利]一种基于全息投影设备的虚拟形象交互方法及系统在审
申请号: | 201711231944.X | 申请日: | 2017-11-30 |
公开(公告)号: | CN107831905A | 公开(公告)日: | 2018-03-23 |
发明(设计)人: | 贾志强;俞晓君 | 申请(专利权)人: | 北京光年无限科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 北京智信禾专利代理有限公司11637 | 代理人: | 吴肖肖 |
地址: | 100049 北京市石景山区石景山*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 全息 投影设备 虚拟 形象 交互 方法 系统 | ||
1.一种基于全息投影设备的虚拟形象交互方法,其特征在于,所述虚拟形象在所述移动设备运行,且所述虚拟形象具备预设形象特征和预设属性,所述方法包括:
通过移动设备和/或成像设备获取多模态输入数据;
由云端服务器解析所述多模态输入数据并获取解析结果,所述解析包括:自然语言理解、视觉感知、触摸感知、语言语音输出和情感计算;
根据所述解析结果确定多模态输出数据;
所述移动设备控制所述多模态输出数据的输出,并由所述成像设备显示所述虚拟形象。
2.根据权利要求1所述的方法,其特征在于,所述移动设备与所述成像设备物理位置参照对齐,以实现所述移动设备与所述成像设备的信号互联。
3.根据权利要求1所述的方法,其特征在于,所述移动设备控制所述多模态输出数据的输出包括:
所述移动设备控制所述虚拟形象的虚拟形象以嘴型、表情和/或肢体动作呈现所述多模态输出数据。
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述成像设备显示所述虚拟形象包括:
所述成像设备基于所述多模态输出数据显示所述虚拟形象。
5.根据权利要求1所述的方法,其特征在于,所述多模态输入数据包括:
语音数据、文本数据、触摸数据、视觉数据和环境数据。
6.根据权利要求1所述的方法,其特征在于,根据所述解析结果确定多模态输出数据包括:
当所述解析结果为技能展示时,所述虚拟形象的多模态输出数据包括歌曲演唱数据和/或舞蹈表演数据。
7.一种基于全息投影设备的虚拟形象交互系统,其特征在于,包括移动设备、成像设备和云端服务器,所述虚拟形象在所述移动设备运行,且所述虚拟形象具备预设形象特征和预设属性,其中,
所述移动设备和/或所述成像设备获取多模态输入数据;
所述云端服务器解析所述多模态输入数据并获取解析结果,所述解析包括:自然语言理解、视觉感知、触摸感知、语言语音输出和情感计算;
所述移动设备根据所述解析结果确定多模态输出数据;
所述移动设备控制所述多模态输出数据的输出,并由所述成像设备显示所述虚拟形象。
8.根据权利要求7所述的系统,其特征在于,所述移动设备还可以控制所述虚拟形象的虚拟形象以嘴型、表情和/或肢体动作呈现所述多模态输出数据。
9.一种虚拟形象,其特征在于,所述虚拟形象在移动设备运行,并由成像设备显示所述虚拟形象;
所述移动设备与所述成像设备物理位置参照对齐,以实现所述移动设备与所述成像设备的信号互联;
所述虚拟形象执行权利要求1-6任意一项所述方法的步骤。
10.一种计算机可读存储介质,其存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-6任意一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京光年无限科技有限公司,未经北京光年无限科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711231944.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:多人参与的人机交互方法及装置
- 下一篇:一种触摸振动反馈装置