[发明专利]一种基于Kinect的多屏互动民族舞娱乐系统

摘要

一种基于Kinect的多屏互动民族舞娱乐系统，本发明为基于Kinect设备的体感民族舞舞蹈游戏系统的技术领域。它是为了解决现有舞蹈游戏缺乏沉浸性与缺少关于民族舞游戏的问题。它的第一投影仪、第二投影仪、第三投影仪和第四投影仪都设置在由第一幕布、第二幕布、第三幕布和第四幕布按顺序围成的一个方型内的中心处，Kinect设备设置在第一幕布前面的下方，第一音箱和第二音箱分别设置在第三幕布两端处，Kinect设备的数据输出端与主机的数据输入端连接。本发明的体感Kinect设备与我国经典民族舞的融合上进行了研究与创新，通过动作识别与判定的相关方法使用户能够得到准确的动作反馈，通过多屏幕投影使用户得到全身心地沉浸式体验。

主权项

一种基于Kinect的多屏互动民族舞娱乐系统，其特征在于它包括主机（1）、Kinect设备（2）、第一幕布（3）、第二幕布（4）、第三幕布（5）、第四幕布（6）、第一投影仪（7）、第二投影仪（8）、第三投影仪（9）、第四投影仪（10）、音响设备（11）、第一音箱（12）、第二音箱（13）；所述第一投影仪（7）、第二投影仪（8）、第三投影仪（9）和第四投影仪（10）都设置在由第一幕布（3）、第二幕布（4）、第三幕布（5）和第四幕布（6）按顺序围成的一个方型内的中心处，并使第一投影仪（7）的投射影象投射在第一幕布（3）上，第二投影仪（8）的投射影象投射在第二幕布（4）上，第三投影仪（9）的投射影象投射在第三幕布（5）上，第四投影仪（10）的投射影象投射在第四幕布（6）上，Kinect设备（2）设置在第一幕布（3）前面的下方，第一音箱（12）和第二音箱（13）分别设置在第三幕布（5）的两侧端处，第一音箱（12）的驱动输入端和第二音箱（13）的驱动输入端都与音响设备（11）的驱动输出端连接，Kinect设备（2）的数据输出端与主机（1）的数据输入端连接，第一投影仪（7）的数字视频信号输入端、第二投影仪（8）的数字视频信号输入端、第三投影仪（9）的数字视频信号输入端和第四投影仪（10）的数字视频信号输入端都分别与主机（1）的多路数字视频输出端连接，音响设备（11）的多路数字音频输入端都分别与主机（1）的多路数字音品输出端连接；启动主机（1）、Kinect设备（2）、第一投影仪（7）、第二投影仪（8）、第三投影仪（9）、第四投影仪（10）和音响设备（11），初始化Kinect设备（2），Kinect设备（2）获取图像数据，包括颜色流ColorImageSteam、深度流DepthImageSteam、骨架流SkeletonStream，生成OpenCV中的Iplmage图像；主机（1）通过Kinect设备（2）判断参与游戏者数目，选择深度值最小即距离设备可见视野最近的玩家进行骨骼跟踪；将玩家骨骼节点与模型骨骼节点进行绑定并将坐标映射到OpenCV绘图坐标系统；获取玩家面部关键点121个，分离出玩家面部图像，并通过关键点的匹配将玩家面部图像赋予模型；主机（1）通过Kinect设备（2）进行玩家动作判定，动作匹配后可进行下一关游戏；提前在动作库中存储有大量的舞蹈动作数据，以关节点之间的相对位置来表示；玩家做出动作后，对玩家骨骼节点的相对位置与动作库中的相对位置进行匹配，判断是否满足特定时间内动作在空间位置上的一定阈值内的匹配。