[发明专利]一种基于AR的远程虚拟交互方法及系统

说明书

本公开的实施例提供了一种基于AR的远程虚拟交互方法，包括：获得第一用户和在第一设备处呈现的虚拟内容之间的交互位置和交互内容，虚拟内容包括在虚拟坐标系内定义的三维3D模型的第一渲染，交互位置在虚拟坐标系内被定义，交互内容通过AR上的摄像头获取；生成AR内容，AR内容包括：基于第二用户在虚拟坐标系内的方位的模型的第二渲染，第二用户的位置基于由第二设备获得的信息，和基于交互位置的交互的虚拟表示；以及输出AR内容并在第二设备处呈现AR内容。还提供对应的系统、电子设备以及计算机可读存储介质，基于AR的远程虚拟交互方法和系统能够突破远程交互双方“所见非同”的障碍，扩展AR交互的应用范围。

技术领域

本公开涉及计算机视觉和增强现实(AR)技术领域，尤其涉及一种基于AR的远程虚拟交互方法及系统。

背景技术

AR涉及使用计算机生成的或虚拟的内容来提升真实世界的体验。在一些情况下，AR涉及将虚拟内容叠加在真实世界的物理内容上。AR不同于虚拟现实(VR)。VR涉及完全虚拟体验的创建，而AR至少保留了一部分真实世界体验，但使用虚拟内容更改了对真实世界体验的感知。

基于AR的远程交互可以大幅缩短时空距离，提高交互效率，因此在工业领域已经得到了广泛应用。典型场景包括现场人员佩戴AR眼镜，与远程人员同时查看相同的目标，无论是现场人员还是远程人员，都可以用手或者鼠标在所看到的画面上做标记，该标记对于双方都实时可见，从而实现现场与远程方的意图交互。

但是，上述交互方法存在如下严重缺陷，很多需要交互的场合下，交互双方所看到的对象并不相同。例如，两个机械设计人员在居家工作条件下，需要讨论设计方案。双方各自面对自己的模型，无法同时看见对方的模型。即便可以，也无法在模型上随意标记，并让对方实时可见。因此，现有的针对同一场景的多方AR交互方法，无法满足这类“所见非同”的交互需求，导致双方用户无法有效交换意图，严重影响了协同效率。

发明内容

本公开针对以上问题，提供了一种基于AR的远程虚拟交互方法及系统，可以突破远程交互双方“所见非同”的障碍，扩展AR交互的应用范围。

根据本公开的第一方面，提供了一种基于AR的远程虚拟交互方法，包括：

S1，获得第一用户和在第一设备处呈现的虚拟内容之间的交互位置和交互内容，所述虚拟内容包括在第一设备处定义的第一虚拟坐标系内放置的三维AR模型，所述交互位置为第一用户在第一虚拟坐标系内相对于三维AR模型的相对位置，所述交互内容为通过第一设备处安装的图像采集装置获取的第一用户对AR模型操作的动作和对AR模型的姿态调整动作；本实施例中，图像采集装置为摄像头，当然本领域技术人员也可以根据需要选择3D手套等其他可以采集图像的装置，均在本发明的保护范围内。

S2，根据第一用户对AR模型操作的动作对所述三维AR模型进行操作并生成操作后的三维AR模型；

S3，将操作后的三维AR模型根据第二用户与所述操作后的三维AR模型的交互位置以及所述对AR模型的姿态调整动作呈现给所述第二用户。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述将操作后的三维AR模型根据第二用户与所述操作后的三维AR模型的交互位置以及所述对AR模型的姿态调整动作呈现给所述第二用户包括：将所述操作后的三维AR模型输出到第二设备并将操作后的三维AR模型根据第二用户的交互位置以及所述对AR模型的姿态调整动作形成AR内容呈现给所述第二用户，

所述第二用户的交互位置为第二用户在在第二虚拟坐标系内相对于所述操作后的三维AR模型的相对位置。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述交互位置为预设状态下的交互位置，根据预设状态下的交互位置向第一用户和第二用户展示所述三维AR模型。