[发明专利]一种配置体感动作与虚拟操作间映射关系的方法及装置

说明书

本发明提供一种配置体感动作与虚拟操作间映射关系的方法及装置，所述方法包括：S1，利用Kinect设备采集目标应用所需的各样本体感动作数据，并生成相应的动作数据文件；S2，对所述动作数据文件进行训练，获得动作识别文件，并加载所述动作识别文件所对应的体感动作，生成动作库；S3，根据目标应用的体感交互需求，构建所述动作库中的每个体感动作与虚拟操作消息之间的映射关系，生成体感动作与虚拟操作映射集。本发明可以自定义设计体感动作，实现用户体感动作行为与传统键盘和鼠标事件的实时映射，并且支持对连续动作的识别，可方便地实现传统交互方式应用的体感化操作，提高开发效率。

技术领域

本发明涉及人机交互技术领域，更具体地，涉及一种配置体感动作与虚拟操作间映射关系的方法及装置。

背景技术

目前人与计算机的交互方式依旧局限于鼠标与键盘，这种交互方式在很长一段时间内制约了人机交互的进一步发展。随着科学技术的高速发展，更高层次的人机交互理念对交互方式提出了巨大的需求，众多科研人员开始对新的交互技术的多通道界面展开研究。Kinect的出现开启了新一代人机交互方式的新篇章，这种基于计算机视觉的体感交互因其相比穿戴式交互更具直观性、自然性而成为最有前景的一种方法。

由于体感交互方式更加自然，尤其适合玩运动类的游戏，体感交互方式目前在游戏领域得到了广泛的应用。但体感交互游戏的开发需要大量的专业知识，导致体感交互游戏制作成本高，制作周期长，开发效率低。除此之外还有很多适合用体感方式进行交互的传统应用，如何使这些传统应用快速地实现高契合度的体感交互方式是当前研究热点。目前，FAAST(Flexible Action and Articulated Skeleton toolkit)是介于Kinect软件开发工具包和应用程序之间的体感操作中间件，主要采用事件触发方式对角度、距离、速度等事件进行识别，开发人员利用FAAST进行二次开发能够实现应用由传统交互方式向体感交互方式的转换。

但基于FAAST进行二次开发本身具有局限性，对连续动作的识别较困难，同时不能实现体感动作的自定义和使用，另外，FAAST的使用门槛较高，开发人员需要花费大量时间了解身体25个可识别关节点的位置和各种复杂的动作描述限制后，才能够使用它进行开发。

发明内容

为了解决将应用从传统交互方式转换为体感交互方式的开发过程中存在的开发门槛较高、开发周期长且对连续体感动作识别较困难，不能实现体感动作的自定义和使用的问题，本发明提供一种配置体感动作与虚拟操作间映射关系的方法及装置。

根据本发明的一个方面，提供一种配置体感动作与虚拟操作间映射关系的方法，包括：

S1，利用Kinect设备采集目标应用所需的各样本体感动作数据，并生成相应的动作数据文件；

S2，对所述动作数据文件进行训练，获得动作识别文件，并加载所述动作识别文件所对应的体感动作，生成动作库；

S3，根据目标应用的体感交互需求，构建所述动作库中的每个体感动作与虚拟操作消息之间的映射关系，生成体感动作与虚拟操作映射集。

其中，在所述步骤S3之后，还包括：

S4，实时采集用户的目标体感动作并与所述动作库中的体感动作进行匹配以获取所述用户的目标体感动作所属的动作类别，根据所述体感动作与虚拟操作映射集，获取并激发所述动作类别所对应的虚拟操作消息。

其中，所述步骤S1进一步包括：

S11，连接Kinect设备，选择需要录制的数据源；

S12，采集开始计时后，等待所述Kinect设备所录制的图像显示出人体骨架后开始采集目标应用所需的各样本体感动作数据；