[发明专利]一种基于虚拟人的手势交互方法及系统

说明书

本申请提供的一种基于虚拟人的手势交互方法及系统，其中，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，所述方法包括：通过所述虚拟人输出多模态数据；获取用户的多模态交互数据；解析所述多模态交互数据，其中，所述多模态交互数据包括通过视觉能力检测并提取的招手手势的图像；当所述招手手势满足预设条件时，确定该手势指示空间移动的意图；所述虚拟人响应所述空间移动的意图并进行移动。

技术领域

本申请涉及人工智能技术领域，特别涉及本申请提供的一种基于虚拟人的手势交互方法及系统、一种虚拟人、一种智能设备及一种计算机可读存储介质。

背景技术

随着科学技术的不断发展，信息技术、计算机技术以及人工智能技术的引入，人与计算机的交互活动逐渐成为人们日常生活的重要组成部分。在这种情况下，更加自然和更加符合人交流习惯的人机交互技术也得到了较大的发展。

目前，在传统的虚拟现实交互中，用户需要通过键盘、鼠标等外接设备来控制虚拟人实现所述虚拟人在虚拟现实空间中进行移动，用户对外接设备的依赖性较强，人机交互不直接不自然，极大的降低了用户体验。

发明内容

有鉴于此，本申请提供的一种基于虚拟人的手势交互方法及系统、一种虚拟人、一种智能设备及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。

一方面，本申请提供一种基于虚拟人的手势交互方法，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，所述方法包括：

通过所述虚拟人输出多模态数据；

获取用户的多模态交互数据；

解析所述多模态交互数据，其中，所述多模态交互数据包括通过视觉能力检测并提取的招手手势的图像；

当所述招手手势满足预设条件时，确定该手势指示空间移动的意图；

所述虚拟人响应所述空间移动的意图并进行移动。

可选地，所述预设条件包括所述招手手势与预设招手手势特征相匹配以及所述招手手势的持续时长大于等于第一阈值。

可选地，所述虚拟人响应所述空间移动的意图并进行移动包括：

所述虚拟人响应所述空间移动的意图并进行移动，同时进行询问。

可选地，所述招手手势特征包括：

实时采集的手部轮廓、各手指轮廓和手指节点；

根据所述手部轮廓、所述手指轮廓和所述手指节点确定所述招手手势，其中，所述手指节点包括手指关节关键点和手指指尖。

可选地，所述招手手势包括：

手心向上，食指、中指、无名指、小拇指形成预设空间位置关系，且所述食指、中指、无名指、小拇指同步进行一次或几次摆动；或者

手心向上，大拇指、中指、无名指、小拇指蜷缩至手掌，食指进行朝向手心的一次或几次摆动；或者

手心向下，食指、中指、无名指、小拇指形成预设空间位置关系，且所述食指、中指、无名指、小拇指同步进行一次或几次摆动。。

可选地，所述虚拟人响应所述空间移动的意图并进行移动之后，还包括：

匹配所述虚拟人的肢体、情感和/或表情输出。

另一方面，本申请还提供了一种基于虚拟人的手势交互系统，包括智能设备和云端服务器，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，其中：

所述智能设备用于，