[发明专利]一种智能人机交互方法在审

专利信息
申请号: 201910537956.8 申请日: 2019-06-20
公开(公告)号: CN110262662A 公开(公告)日: 2019-09-20
发明(设计)人: 何建军 申请(专利权)人: 河北识缘信息科技发展有限公司
主分类号: G06F3/01 分类号: G06F3/01;G10L15/22
代理公司: 暂无信息 代理人: 暂无信息
地址: 071000 河北省保定市高碑店*** 国省代码: 河北;13
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 视觉设备 音频操作 智能人机交互 音频指令 指令 预存 匹配 人手 三维图像信息 生成图像信息 音频输入单元 惯性传感器 红外传感器 视觉传感器 存储器 单元开始 获取位置 检测结果 匹配成功 实时获取 实时检测 手势操作 虚拟环境 音频交互 姿势信息 仿真度 客户端 深度图 调取 预设 佩戴 姿势 真实性 捕捉 采集 场景 检测 成功 学习
【说明书】:

发明公开了一种智能人机交互方法,包括如下步骤:佩戴视觉设备,通过视觉设备的红外传感器实时检测预设范围内是否有人;当检测结果为是时,控制音频交互单元开始运行,并采集三维图像信息而获取不同角度的深度图;客户端生成图像信息,并从存储器中调取3D虚拟场景数据与预存的音频指令文件;将音频输入单元检测到的音频操作指令与预存的音频指令文件进行匹配,匹配成功后,实时获取成功匹配的音频操作指令;根据音频操作指令,进行手势操作,视觉设备的惯性传感器获取位置与姿势信息,视觉传感器实时捕捉人手的位置并识别人手的姿势。本发明打造写实的虚拟环境,真实性更强,能够在高仿真度的场景下进行对照学习,更加便捷和高效。

技术领域

本发明涉及人机交互技术领域,尤其涉及了一种智能人机交互方法。

背景技术

随着动态手势识别的发展,对于智能控制和视频监控领域的发展都产生了重大的影响,而动态手势识别的一个重要的用途就是人机交互,目前动态手势交互中的手势很多,手势运用不合理,手势的滥用,也造成了人机交互中易用性和体验性的下降。尤其是应用在教学时,现有大多采用观看视频及收听语音的方式,学习者智能被动的看或听预存的文件,无法产生互动,后来采用VR设备进行呈现,但是真实性的效果差。

发明内容

针对现有技术存在的不足,本发明的目的就在于提供了一种智能人机交互方法,打造写实的虚拟环境,真实性更强,能够在高仿真度的场景下进行对照学习,更加便捷和高效。

为了实现上述目的,本发明采用的技术方案是这样的:一种智能人机交互方法,包括如下步骤:

(1)将视觉设备佩戴在演示者上,另外根据学习者数量佩戴相应数量的视觉设备;

(2)通过视觉设备的红外传感器实时检测预设范围内是否有人;

(3)当步骤(2)中的检测结果为否时,重复步骤(2),当步骤(2)中的检测结果为是时,控制音频交互单元开始运行,并通过视觉传感器采集三维图像信息而获取不同角度的深度图;

(4)客户端通过图形处理器生成图像信息,并从存储器中调取3D虚拟场景数据与预存的音频指令文件;

(5)将步骤(3)中音频输入单元检测到的音频操作指令与步骤(4)中预存的音频指令文件进行匹配,匹配成功后,实时获取成功匹配的音频操作指令;

(6)根据音频操作指令,演示者进行手势操作,视觉设备的惯性传感器获取位置与姿势信息,视觉传感器实时捕捉人手的位置并识别人手的姿势。

作为一种优选方案,所述步骤(6)中的惯性传感器包括加速度计与陀螺仪。

作为一种优选方案,所述步骤(3)中的音频交互单元包括语音输入模块、语音识别模块、语音输出模块。

作为一种优选方案,所述步骤(3)中的视觉传感器包括图像信息摄像头与深度信息摄像头。

作为一种优选方案,所述视觉设备为MR视镜。

作为一种优选方案,所述客户端为PC电脑。

与现有技术相比,本发明的有益效果:本发明打造写实的虚拟环境,真实性更强,能够在高仿真度的场景下进行对照学习,更加便捷和高效。

附图说明

图1是本发明的原理框图。

具体实施方式

下面结合具体实施例对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。

实施例:

一种智能人机交互方法,包括如下步骤:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于河北识缘信息科技发展有限公司,未经河北识缘信息科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910537956.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top