[发明专利]一种AR沉浸式旅游导览方法、装置、存储介质及终端设备

权利要求书

1.一种AR沉浸式旅游导览方法，其特征在于，包括：

识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；

根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象，包括：

通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状；具体为：拟合SMPL模型和2D检测，估计每一帧的初始人体形状和3D姿势；基于拟合结果，将每一帧中的轮廓点与人体模型中的3D点结合起来，根据每个投影光线的对应3D模型点的反向变形模型，变换投影光线；所有帧的拟合结果进行处理，得到了一个以标准姿势展示的人体形状；

对所述3D人体形状进行一致形态评估，保留与所述需要构建的人体形象保持一致的所述3D人体形状；

对一致形态的偏离进行每一帧的优化，得到逐帧形态并计算所述3D人体形状的纹理图；

将所述合成的三维人体形象通过AR设备显示出来。

2.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，还包括：

采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令。

3.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，还包括：

采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应。

4.如权利要求1所述的AR沉浸式旅游导览方法，其特征在于，还包括：

实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。

5.如权利要求4所述的AR沉浸式旅游导览方法，其特征在于，所述运动学算法包括：IK逆向运动学算法和FK正向运动学算法。

6.一种AR沉浸式旅游导览装置，所述装置应用于如权利要求1至5任一项所述的AR沉浸式旅游导览方法，其特征在于，包括：

识别判断模块，用于识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；

3D人体合成模块，用于根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；

显示模块，用于将所述合成的三维人体形象通过AR设备显示出来；

还包括：

语音识别模块，用于采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令；

动作互动模块，用于采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应；

运动轨迹模块，用于实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的计算机程序；其中，所述计算机程序在运行时控制所述计算机可读存储介质所在的设备执行如权利要求1～5任一项所述的AR沉浸式旅游导览方法。

8.一种终端设备，其特征在于，包括处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器在执行所述计算机程序时实现如权利要求1～5任一项所述的AR沉浸式旅游导览方法。