[发明专利]一种基于情感化身的混合现实协同系统

权利要求书

1.一种基于情感化身的混合现实协同系统，其特征在于，所述系统包括A系统、B系统和服务器，A系统和B系统结构相同，其均包括采集模块、客户端和HMD设备；其中A系统包括用于采集A协同者动态信息的A采集模块、收集与发送动态信息的A客户端、用于渲染显示情感化身的A HMD设备；其中B系统包括用于采集B协同者动态信息的B采集模块、收集与发送动态信息的B客户端、用于渲染显示情感化身的B HMD设备,所述服务器位于A系统和B系统之间，用于数据的交换与处理。

2.根据权利要求1所述的基于情感化身的混合现实协同系统，其特征在于，所述采集模块包括手势识别模块、眼动追踪模块、相机、面部表情识别模块、头部定位模块。

3.根据权利要求1所述的基于情感化身的混合现实协同系统，其特征在于，所述基于情感化身的混合现实协同系统工作过程包括以下步骤：

步骤1：构建协同空间；

步骤2：获取手部信息；

步骤3：获取头部信息；

步骤4：获取眼动和面部表情信息；

步骤5：服务器构建情感化身；

步骤6：在客户端和HMD设备进行渲染显示。

4.根据权利要求3所述的基于情感化身的混合现实协同系统，其特征在于，所述步骤2中，获取手部信息采用的是Leap motion设备，识别包括手掌、手指、关节、关节点、手腕、手臂位置，记录各关键点位置Position(x,y,z)和旋转Rotation(x,y,z,w)。

5.根据权利要求3所述的基于情感化身的混合现实协同系统，其特征在于，所述步骤3中，获取头部信息记录头部位姿Ph，包括位置Position(x,y,z)和旋转Rotation(x,y,z,w)。

6.根据权利要求3所述的基于情感化身的混合现实协同系统，其特征在于，所述步骤4中通过HTC Pro eye眼动追踪模块，获取包括瞳距、眼球位置信息；通过相机拍摄人体正面，采集图像，获取其余面部信息。