[发明专利]商品展示方法及电子设备

权利要求书

1.一种商品展示方法，其特征在于，包括：

响应于通过增强现实AR方式对目标商品进行展示的请求，采集现实环境图像并加载所述目标商品对应的三维模型；所述目标商品包括手持物品类商品；

从所采集到的现实环境图像中检测用户的手部图像；

将所述目标商品的三维模型映射到所述现实环境图像中所述手部图像所在的位置处进行展示。

2.根据权利要求1所述的方法，其特征在于，还包括：

对用户的手部摆放姿势进行检测；

所述将所述目标商品的三维模型映射到所述现实环境图像中所述手部图像所在的位置处进行展示，包括：

在所述手部摆放姿势符合条件的情况下，将所述目标商品的三维模型映射到所述现实环境图像中所述手部图像所在的位置处进行展示。

3.根据权利要求2所述的方法，其特征在于，还包括：

如果所述手部图像的手部姿势不符合条件，则提供关于摆放姿势的提示信息。

4.根据权利要求1所述的方法，其特征在于，

所述三维模型的尺寸与所述目标商品的真实尺寸相同；

所述方法还包括：

对所述三维模型的尺寸信息进行展示。

5.根据权利要求1所述的方法，其特征在于，还包括：

从所述现实环境图像中检测到用户通过手部动作对所述三维模型执行的互动操作后，展示出由所述互动操作触发的关于所述三维模型的动态内容。

6.根据权利要求5所述的方法，其特征在于，

所述展示出由所述互动操作触发的关于所述三维模型的动态内容，包括：

在检测到所述手部图像发生平移或翻转时，将所述三维模型跟随所述手部图像的平移或翻转进行展示。

7.根据权利要求5所述的方法，其特征在于，

所述手持物品包括带有显示屏的手持设备；

所述互动操作用于对所述手持设备中与启动目标功能相关的操作进行模拟；

所述展示出由所述互动操作触发的关于所述三维模型的动态内容，包括：

在所述三维模型中的显示屏所在区域展示出所述目标功能对应的界面内容。

8.根据权利要求1至7任一项所述的方法，其特征在于，还包括：

对所述手部图像进行实时的三维网格体Mesh重建，以获取多个三维手部关键点坐标；

根据所述三维手部关键点坐标确定所述手部的景深信息；

根据所述三维手部关键点坐标以及所述景深信息，确定所述目标商品的三维模型在所述现实环境图像中的展示位置及展示尺寸。

9.根据权利要求8所述的方法，其特征在于，还包括：

在对所述手部图像进行三维Mesh重建的过程中，还获取相机参数信息；

根据所述三维手部关键点坐标、景深信息以及相机参数信息，进行手部姿态估计；

根据手部姿态估计结果确定目标商品的三维模型投射到所述现实环境图像中时的展示姿态。

10.根据权利要求9所述的方法，其特征在于，

所述目标商品的三维模型与标准姿态的三维手部模型具有绑定关系，在默认状态下，所述三维手部模型通过所述标准姿态持握所述目标商品的三维模型，所述标准姿态的三维手部模型为不可见状态；

所述手部姿态估计结果包括：真实手部的姿态相对于所述标准姿态的旋转矩阵和/或平移向量；

所述根据手部姿态估计结果确定目标商品的三维模型投射到所述现实环境图像中时的展示姿态，包括：

通过将所估计出的旋转矩阵和/或平移向量作用于与所述目标商品的三维模型绑定的三维手部模型，确定目标商品的三维模型投射到所述现实环境图像中时的展示姿态。

11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至10任一项所述的方法的步骤。

12.一种电子设备，其特征在于，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行权利要求1至10任一项所述的方法的步骤。