[实用新型]一种虚拟现实系统的交互控制装置及虚拟现实设备

权利要求书

1.一种虚拟现实系统的交互控制装置，其特征在于，包括模式选择单元、第一深度摄像头、第二深度摄像头、动作识别单元和指令发送单元；

所述模式选择单元，用于根据应用场景选择对用户肢体动作的识别模式，所述识别模式包括：仅手部模式、仅脚部模式、手脚并用模式；

所述第一深度摄像头，用于当所述模式选择单元选择仅手部模式或手脚并用模式时，按预设的频率采集用户手部的图像；

所述第二深度摄像头，用于当所述模式选择单元选择仅脚部模式或手脚并用模式时，按预设的频率采集用户脚部的图像；

所述动作识别单元，用于根据所述第一深度摄像头采集的图像识别用户手部的动作；以及根据所述第二深度摄像头采集的图像识别用户脚部的动作；

所述指令发送单元，用于对所述动作识别单元识别出的用户手部和/或脚部的某一动作，若存在与该动作对应的预先定义的控制指令时，则向所述虚拟现实系统的虚拟场景发送该控制指令，在所述虚拟场景中执行该控制指令。

2.如权利要求1所述的交互控制装置，其特征在于，所述交互控制装置还包括图像选择单元，当所述模式选择单元选择手脚并用模式时，

所述图像选择单元，用于按照预设的权重从所述第一深度摄像头采集的图像中和所述第二深度摄像头采集的图像中各选择若干图像；

所述动作识别单元，具体用于仅根据所述图像选择单元选择的图像识别用户手部和/或脚部的动作。

3.如权利要求1所述的交互控制装置，其特征在于，所述动作识别单元包括训练模块和匹配模块；

所述训练模块，用于使用预先采集的用户手部各种动作的图像和用户脚部各种动作的图像对一卷积神经网络模型进行训练，建立用于识别用户手部和/或脚部动作的识别模型；

所述匹配模块，用于将所述第一深度摄像头采集到的图像和/或所述第二深度摄像头采集到的图像与所述训练模块建立的识别模型进行匹配，从而识别出用户手部和/或脚部的动作。

4.一种虚拟现实设备，包括显示屏，其特征在于，还包括模式选择单元、第一深度摄像头、第二深度摄像头、动作识别单元和指令发送单元；

所述模式选择单元，用于根据应用场景选择对用户肢体动作的识别模式，所述识别模式包括：仅手部模式、仅脚部模式、手脚并用模式；

所述第一深度摄像头，用于当所述模式选择单元选择仅手部模式或手脚并用模式时，按预设的频率采集用户手部的图像；

所述第二深度摄像头，用于当所述模式选择单元选择仅脚部模式或手脚并用模式时，按预设的频率采集用户脚部的图像；

所述动作识别单元，用于根据所述第一深度摄像头采集的图像识别用户手部的动作；以及根据所述第二深度摄像头采集的图像识别用户脚部的动作；

所述指令发送单元，用于对所述动作识别单元识别出的用户手部和/或脚部的某一动作，若存在与该动作对应的预先定义的控制指令时，则向所述显示屏播放的虚拟场景发送该控制指令，在所述虚拟场景中执行该控制指令。

5.如权利要求4所述的虚拟现实设备，其特征在于，还包括图像选择单元，当所述模式选择单元选择手脚并用模式时，

所述图像选择单元，用于按照预设的权重从所述第一深度摄像头采集的图像中和所述第二深度摄像头采集的图像中各选择若干图像；

所述动作识别单元，具体用于仅根据所述图像选择单元选择的图像识别用户手部和/或脚部的动作。

6.如权利要求4所述的虚拟现实设备，其特征在于，所述动作识别单元包括训练模块和匹配模块；

所述训练模块，用于使用预先采集的用户手部各种动作的图像和用户脚部各种动作的图像对一卷积神经网络模型进行训练，建立用于识别用户手部和/或脚部动作的识别模型；

所述匹配模块，用于将所述第一深度摄像头采集到的图像和/或所述第二深度摄像头采集到的图像与所述训练模块建立的识别模型进行匹配，从而识别出用户手部和/或脚部的动作。

7.如权利要求4所述的虚拟现实设备，其特征在于，所述模式选择单元为在所述虚拟现实设备外部设置的硬件开关，或者在所述显示屏显示的用户操作界面中设置的软件开关。