[发明专利]歌剧虚拟同步指挥方法及系统

权利要求书

1.一种歌剧虚拟同步指挥方法，其特征在于，包括：

S1、利用RGBD动作捕捉设备捕捉图像采集区域的图像，并判断所述图像是否为待模拟指挥棒的图像，其中，所述RGBD动作捕捉设备的识别骨骼包括预先设置的1个指挥棒骨骼；

S2、若所述图像为所述指挥棒的图像，则获取所述指挥棒的骨骼的空间位置数据；

S3、利用图形渲染引擎对所述空间位置数据进行处理，得到所述指挥棒动画；

所述判断所述图像是否为待模拟指挥棒的图像，包括：

对所述图像中的手部区域进行定位；

利用定位结果进行所述指挥棒识别，若识别出所述指挥棒，则确定所述图像为所述指挥棒的图像，否则，则确定所述图像不是所述指挥棒的图像。

2.根据权利要求1所述的歌剧虚拟同步指挥方法，其特征在于，若确定出所述图像不是所述指挥棒的图像，则跳转至步骤S1执行。

3.根据权利要求1或2所述的歌剧虚拟同步指挥方法，其特征在于，在所述利用定位结果进行所述指挥棒识别之前，还包括：

利用识别模型对指挥棒的识别进行训练。

4.根据权利要求1所述的歌剧虚拟同步指挥方法，其特征在于，捕捉到的图像包括RGB数值以及Depth深度数据。

5.根据权利要求1所述的歌剧虚拟同步指挥方法，其特征在于，在所述S3之前，还包括：

对所述空间位置数据进行平滑。

6.根据权利要求1所述的歌剧虚拟同步指挥方法，其特征在于，在所述S3之前，还包括：

根据所述空间位置数据以及历史空间位置数据判断所述骨骼的运动轨迹是否符合预设的运动轨迹，若符合，则跳转至步骤S3。

7.一种歌剧虚拟同步指挥系统，其特征在于，包括：

RGBD动作捕捉设备，用于捕捉图像采集区域的图像，其中，所述RGBD动作捕捉设备的识别骨骼包括预先设置的1个指挥棒骨骼；

第一判断单元，用于判断所述RGBD动作捕捉设备捕捉的图像是否为待模拟指挥棒的图像；

位置数据获取单元，用于若所述第一判断单元确定出所述图像为所述指挥棒的图像，则获取所述指挥棒的骨骼的空间位置数据；

图形渲染引擎，用于对所述位置数据获取单元获取的空间位置数据进行处理，得到所述指挥棒动画；

所述第一判断单元，包括：

定位子单元，用于对所述图像中的手部区域进行定位；

识别子单元，用于利用定位结果进行所述指挥棒识别，若识别出所述指挥棒，则确定所述图像为所述指挥棒的图像，否则，则确定所述图像不是所述指挥棒的图像。

8.根据权利要求7所述的歌剧虚拟同步指挥系统，其特征在于，还包括：

第二判断单元，用于在所述图形渲染引擎生成指挥棒动画之前，根据所述空间位置数据以及历史空间位置数据判断所述骨骼的运动轨迹是否符合预设的运动轨迹，若符合，则通知所述图形渲染引擎进行操作。