[发明专利]一种基于VR视频的人机交互方法及系统

权利要求书

1.一种基于VR视频的人机交互系统，其特征在于：包括VR控制单元；

所述VR控制单元包括存储模块、显示屏控制模块和通信模块；

所述VR控制单元通过数据传输及存储模块与终端设备进行信息交互；

所述VR控制单元通过数据传输及存储模块与视频资源库进行信息交互；

所述VR控制单元通过数据传输及存储模块与VR头显进行信息交互；

所述VR控制单元通过数据传输及存储模块与视频信息处理单元进行信息交互；

所述VR控制单元与VRPN多通道交互单元连接。

2.根据权利要求1所述的一种基于VR视频的人机交互系统，其特征在于，所述终端设备包括台式电脑、笔记本、手机。

3.根据权利要求1所述的一种基于VR视频的人机交互系统，其特征在于，所述VR头显包括显示屏、语音模块；所述VR头显通过数据传输方式与显示屏相联；所述VR头显通过数据传输方式与语音模块相联；所述语音模块有3D音效。

4.根据权利要求1所述的一种基于VR视频的人机交互系统，其特征在于，所述视频信息处理单元包括图像预处理模块和图像检索模块；所述视频信息处理单元通过数据传输方式与预处理模块相联；所述视频信息处理单元通过数据传输方式与图像检索模块相联。

5.根据权利要求1所述的一种基于VR视频的人机交互系统，其特征在于，所述VRPN多通道交互单元包括电磁跟踪器、数据手套、内置传感器手柄、三维鼠标、智能语音助手、力反馈手套；所述电磁跟踪器、数据手套、内置传感器手柄、三维鼠标、智能语音助手、力反馈手套均通过数据传输方式与VRPN多通道交互单元相联。

6.如权利要求1-5任一所述的一种基于VR视频的人机交互方法，其特征在于，包括如下过程：

S001视频播放：终端设备通过VR控制单元从视频资源库中提取视频文件进行播放；

S002视频暂停：用户通过内置传感器手柄或智能语音助手对视频进行停止操作；

S003视频信息处理：图像预处理模块对暂停时显示的画面进行预处理，图像检索模块对画面中各种人物、物品或花草鱼虫进行智能区分划块；

S004选择检索目标：用户通过内置传感器手柄或智能语音助手对画面中可检索的块进行选择；

S005反馈检索结果：VR控制单元对选择的块进行网络检索并把检索的结果在VR头显的显示屏中显示给用户，同时检索结果如含有语音则同时语言模块进行语音播放；

S006是否重复检索：用户对检索结果判断是否需要重新检索一次，如需检索则跳到S005，如果不需要则进入下一步，以上选择通过内置传感器手柄或智能语音助手来完成操作；

S007返回视频界面：再次进入带有划分块的画面；

S008是否选择新检索目标：用户再次对画面中的块进行选择是否再次检索，如检索则跳到S004或放弃检索计入下一步，以上选择通过内置传感器手柄或智能语音助手来完成操作；

S009继续播放：VR控制单元继续对暂停的视屏从当前暂停处开始播放。