[发明专利]全息虚拟人AR互动展示方法、装置及设备

权利要求书

1.全息虚拟人AR互动展示方法，其特征在于，采用摄像组件对互动区域进行覆盖拍摄，将能够反映预设参与者表演内容的全息虚拟形象录入控制模块，具体包括如下步骤：

步骤101，获取当前时刻互动区域的实时单方位或多方位视图；

步骤102，根据互动区域的实时单方位或多方位视图得到当前时刻互动区域的实时场景画面；

步骤103，将当前时刻互动区域的实时场景画面与预设参与者的全息虚拟形象进行场景画面融合，得到在当前时刻实时场景画面与预设参与者的全息虚拟形象之间交互的画面帧，并将所述画面帧发送至显示组件进行显示；

步骤104，多次重复步骤101-103，获取按时间排序的多个实时场景画面与预设参与者的全息虚拟形象之间交互的画面帧，并发送至显示组件以完成全息虚拟人AR互动展示。

2.根据权利要求1所述全息虚拟人AR互动展示方法，其特征在于，所述将预设参与者的全息虚拟形象录入控制模块的过程为：

步骤201，获取预设参与者在表演状态下的多方位视图；

步骤202，根据步骤201中预设参与者的多方位视图对预设参与者的实时特征进行3D全息虚拟化，得到能够反映预设参与者表演内容的全息虚拟形象；

步骤203，将能够反映预设参与者表演内容的全息虚拟形象存储至控制模块。

3.根据权利要求2所述全息虚拟人AR互动展示方法，其特征在于，步骤202中，所述预设参与者的实时特征包括：身体姿态特征、表情神态特征、服装特征、毛发特征。

4.根据权利要求3所述全息虚拟人AR互动展示方法，其特征在于，步骤203中，将当前时刻互动区域的实时场景画面与预设参与者的全息虚拟形象进行场景画面融合，具体为：

基于预设参与者的全息虚拟形象的手势、身体姿势与当前时刻互动区域的实时场景画面融合。

5.根据权利要求1至4任一项所述全息虚拟人AR互动展示方法，其特征在于，步骤104还包括获取摄像组件当前时刻的外参，具体过程为：

步骤301，获取摄像组件当前帧与上一帧拍摄的图像，并获取两帧图像之间的光流；

步骤302，根据当前帧图像与上一帧图像之间的光流获取当前帧图像相对上一帧图像的单应矩阵；

步骤303，根据单应矩阵获取当前帧图像与上一帧图像之间摄像组件外参的变化参数；

步骤304，根据前帧图像与上一帧图像之间摄像组件外参的变化参数以及上一帧图像对应时刻摄像组件的外参获取当前帧对应时刻摄像组件的外参，即当前时刻的摄像机外参。

6.全息虚拟人AR互动展示装置，其特征在于，包括：存储器和处理器，所述存储器存储有全息虚拟人AR互动展示程序，所述处理器在运行所述程序时执行所述权利要求1至5任一项方法所述的步骤。

7.全息虚拟人AR互动展示设备，其特征在于，包括：

互动平台，用于提供互动区域；

摄像组件，用于对互动区域进行覆盖拍摄，用于获取互动区域的实时多方位视图；

控制模块，包括权利要求6所述的全息虚拟人AR互动展示装置，与摄像组件通信相连，用于存储预设参与者的全息虚拟形象以及实时场景画面与预设参与者的全息虚拟形象之间交互的画面帧；

显示组件，与控制模块通信相连，用于展示预设参与者的全息虚拟形象之间交互的画面帧。

8.根据权利要求7所述全息虚拟人AR互动展示设备，其特征在于，所述显示组件包括显示屏，所述显示屏正对互动区域以用于展示预设参与者的互动画面。