[发明专利]一种AR沉浸式旅游导览方法、装置、存储介质及终端设备

说明书

本发明公开了一种AR沉浸式旅游导览方法，包括：识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；将所述合成的三维人体形象通过AR设备显示出来；本发明还公开了一种AR沉浸式旅游导览装置；本发明利用AR技术合成历史人物三维景象并进行呈现，解决旅游景点中的历史场景无法重现给游客的技术问题，实现游客在参观旅游景点时能重现历史场景，增加游客体验；通过增加语音识别和动作互动功能，进一步提高游客的体验感；通过捕捉当期环境中游客的动作识别运动轨迹并进行显示，再进一步提高游客的体验感。

技术领域

本发明涉及视觉处理技术领域，尤其涉及一种AR沉浸式旅游导览方法、装置、存储介质及终端设备。

背景技术

现在的旅游景点，特别是一些文化古迹，历史场景难以重现，体验和所看到的皆是几千年以后的场景，光凭文字导览或导游的讲解，难以想象古人的场景，体验效果也不好。

发明内容

本发明提供了一种AR沉浸式旅游导览方法、装置、存储介质及终端设备，以解决旅游景点中的历史场景无法重现给游客的技术问题，从而利用AR技术合成历史人物三维景象并进行呈现，进而实现游客在参观旅游景点时能重现历史场景，增加游客体验。

为了解决上述技术问题，本发明实施例提供了一种AR沉浸式旅游导览方法，包括：

识别并判断当前环境类型，并根据所述环境类型按预设规则选取需要构建的人体形象；

根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象；

将所述合成的三维人体形象通过AR设备显示出来。

作为优选方案，所述根据所述需要构建的人体形象通过3D人体扫描技术进行三维模拟人体表面轮廓的非接触自动测量，合成三维人体形象，包括：

通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状；

对所述3D人体形状进行一致形态评估，保留与所述需要构建的人体形象保持一致的所述3D人体形状；

对一致形态的偏离进行每一帧的优化，得到逐帧形态并计算所述3D人体形状的纹理图。

作为优选方案，所述通过标准可视化外壳技术从多个视角捕捉静态的所述需要构建的人体形象，控制光线穿过图像轮廓点约束出3D人体形状，包括：

拟合SMPL模型和2D检测，估计每一帧的初始人体形状和3D姿势；

基于拟合结果，将每一帧中的轮廓点与人体模型中的3D点结合起来，根据每个投影光线的对应3D模型点的反向变形模型，变换投影光线；

所有帧的拟合结果进行处理，得到了一个以标准姿势展示的人体形状。

作为优选方案，还包括：

采集并识别语音信息数据，对所述识别的语音信息数据进行提取转化为动作指令，并控制所述三维人体形象执行所述动作指令。

作为优选方案，还包括：

采集图像并识别图像中的动作行为，对所述识别的动作行为进行提取转化为动作指令，并根据预设的动作指令规则控制所述三维人体形象执行相应的动作反应。

作为优选方案，还包括：

实时采集当前环境中人物的动作运动轨迹，根据运动学算法对所述动作运动轨迹进行模拟计算出当前环境中人物的三维图形，进行显示。

作为优选方案，所述运动学算法包括：IK逆向运动学算法和FK正向运动学算法。