[发明专利]一种虚拟对象的控制方法、装置、电子设备及存储介质

权利要求书

1.一种虚拟对象的控制方法，其特征在于，包括：

采集现实场景图像，并在终端设备上展示所述现实场景图像与虚拟对象相叠加的增强现实图像；

识别所述现实场景图像中手部的目标关键点在设备坐标系下的第一显示位置信息，以及，识别所述现实场景图像中的手臂的长度信息；

基于所述第一显示位置信息以及所述手臂的长度信息，将所述第一显示位置信息变换为世界坐标系下的第二显示位置信息；

基于所述第二显示位置信息，控制所述增强现实图像中所述虚拟对象的展示位置。

2.根据权利要求1所述的控制方法，其特征在于，所述识别所述现实场景图像中手部的目标关键点在设备坐标系下的第一显示位置信息，包括：

对所述现实场景图像进行手部检测，确定所述现实场景图像中包含手部的检测区域；

获取所述检测区域的目标位置点在所述现实场景图像中的位置坐标，并将该位置坐标作为所述第一显示位置信息。

3.根据权利要求1所述的控制方法，其特征在于，所述识别所述现实场景图像中的手臂的长度信息，包括：

对所述现实场景图像进行检测，确定所述现实场景图像中的手臂姿态类型；

基于所述手臂姿态类型，以及预先建立的手臂姿态类型和手臂的长度信息之间的映射关系，确定所述现实场景图像中的手臂的长度信息。

4.根据权利要求1至3任一所述的控制方法，其特征在于，所述基于所述第一显示位置信息以及所述手臂的长度信息，将所述第一显示位置信息变换为世界坐标系下的第二显示位置信息，包括：

基于所述终端设备的屏幕尺寸信息对所述第一显示位置信息进行归一化处理，得到所述手部的目标关键点在标准化设备坐标系下的第三显示位置信息；

基于所述第三显示位置信息、所述终端设备的图像采集单元的相机投影矩阵和所述手臂的长度信息，确定所述第二显示位置信息。

5.根据权利要求4所述的控制方法，其特征在于，所述基于所述第三显示位置信息、所述终端设备的图像采集单元的相机投影矩阵和所述手臂的长度信息，确定所述第二显示位置信息，包括：

基于所述第三显示位置信息、所述相机投影矩阵和所述手臂的长度信息，确定所述手部的目标关键点在相机坐标系下的第四显示位置信息；

基于所述第四显示位置信息和所述图像采集单元拍摄所述现实场景图像时使用的相机外参矩阵，确定所述第二显示位置信息；

其中，所述相机投影矩阵为标准化设备坐标系和相机坐标系的转换矩阵，所述相机外参矩阵为世界坐标系和相机坐标系的转换矩阵。

6.根据权利要求1至5任一所述的控制方法，其特征在于，所述基于所述第二显示位置信息，控制所述增强现实图像中所述虚拟对象的展示位置，包括：

基于在不同帧现实场景图像中的所述手部的目标关键点对应的第二显示位置信息，确定所述手部的目标关键点在现实场景中的位置变化数据；

基于所述位置变化数据，控制所述增强现实图像中所述虚拟对象的展示位置进行移动。

7.根据权利要求1至5任一所述的控制方法，其特征在于，所述基于所述第二显示位置信息，控制所述增强现实图像中所述虚拟对象的展示位置，包括：

基于所述手部的目标关键点对应的第二显示位置信息，以及所述手部的目标关键点和所述虚拟对象之间的预设相对位置关系，确定所述虚拟对象的目标展示位置；

基于确定的所述虚拟对象的目标展示位置，控制所述增强现实图像中所述虚拟对象移动至所述目标展示位置。