[发明专利]利用增强现实佩戴设备可视化智能互动教考系统和方法

说明书

本发明提供了一种利用增强现实佩戴设备可视化智能互动教考系统和方法，对操作区域进行深度图像序列采集，得到多个深度图像序列；对获取的多个深度图像序列分别进行人体姿态信息提取，得到对应的单视角人体姿态信息；根据多个单视角人体姿态信息以及多个深度摄像机之间的位置关系，得到一个多视角人体姿态信息，并对多视角人体姿态信息进行分析得到分析结果，并得到用于指引操作者至标准姿态的姿态指引信息；提供操作区域的增强现实图像，姿态指引信息显示/不显示在增强现实图像中。本发明通过增强现实技术实现了医护人员操作练习的教学和考核，填补了现有技术的空白。

技术领域

本发明涉及教育演示领域，具体地，涉及一种利用增强现实佩戴设备可视化智能互动教考系统和方法。

背景技术

对医护人员进行操作练习和考核是非常重要的，因此，市场上诞生了各种供医护人员操作练习的设备。专利文献CN211979995U公开了一种胰岛素皮下注射可穿戴练习操作装置，专门应用于胰岛素皮下注射项目。

正如上述的专利文献所公开的装置，现有的医护人员操作练习的设备需要针对于每一种训练项目分别进行设计，导致目前各种操作练习的设备种类繁多，使用和存放不便。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种利用增强现实佩戴设备可视化智能互动教考系统和方法。

根据本发明提供的一种利用增强现实佩戴设备可视化智能互动教考系统，包括：

多个深度摄像机：对操作区域进行深度图像序列采集，得到多个深度图像序列；

边缘计算节点：连接所述深度摄像机，对获取的多个深度图像序列分别进行人体姿态信息提取，得到对应的单视角人体姿态信息；

云服务器：根据多个单视角人体姿态信息以及所述多个深度摄像机之间的位置关系，得到一个多视角人体姿态信息，并对所述多视角人体姿态信息进行分析得到分析结果，并得到用于指引操作者至标准姿态的姿态指引信息；

增强现实佩戴设备：提供所述操作区域的增强现实图像，所述姿态指引信息显示/不显示在所述增强现实图像中。

优选地，所述多个深度摄像机分布设置于所述操作区域的周围不同位置，每个所述深度摄像机连接一个或多个所述边缘计算节点。

优选地，所述多个深度摄像机之间的位置关系的获取方式包括：

根据所述多个深度摄像机采集到的深度图像序列中人体上的固定尺寸及图案的多个标记物的几何形变，得到所述多个深度摄像机之间的位置关系。

优选地，还包括触控屏，用于系统控制以及增强现实图像、所述分析结果的显示。

优选地，所述姿态指引信息的获取包括：将所述多视角人体姿态信息与预设的标准姿态信息的相似度进行比对。

根据本发明提供的一种利用增强现实佩戴设备可视化智能互动教考方法，包括：

采集步骤：通过多个深度摄像机对操作区域进行深度图像序列采集，得到多个深度图像序列；

单视角人体姿态获取步骤：连接所述深度摄像机，对获取的多个深度图像序列分别进行人体姿态信息提取，得到对应的单视角人体姿态信息；

多视角人体姿态获取步骤：根据多个单视角人体姿态信息以及所述多个深度摄像机之间的位置关系，得到一个多视角人体姿态信息，并对所述多视角人体姿态信息进行分析得到分析结果，并得到用于指引操作者至标准姿态的姿态指引信息；

显示步骤：提供所述操作区域的增强现实图像，所述姿态指引信息显示/不显示在所述增强现实图像中。

优选地，所述多个深度摄像机分布设置于所述操作区域的周围不同位置，每个所述深度摄像机连接一个或多个所述边缘计算节点。