[发明专利]一种虚拟键盘的展示方法及装置

权利要求书

1.一种虚拟键盘的展示方法，其特征在于，所述方法包括：

分别对用户的双手及物体表面进行建模，以构建在虚拟现实场景中用户的双手模型以及表面键盘模型；

将所述双手模型中被遮挡的手指模型补全，以建立标准双手模型；

根据所述标准双手模型中手指之间的当前空间位置关系，对所述表面键盘模型的键距进行自适应调节，以得到与所述手指之间的当前空间位置关系相适配的自适应键盘模型；

在所述虚拟现实场景中展示所述自适应键盘模型；

将所述双手模型中被遮挡的手指模型补全包括：

确定所述双手模型中目标手指的特征向量，所述特征向量中包括与所述目标手指相关联的十二维特征；

基于预先训练得到的标准手掌的特征向量，枚举所述标准手掌的特征向量对应的缺失手指的各种情形，并计算所述目标手指的特征向量与缺失手指的各种情形之间的相似度，并将相似度最大的情形作为当前缺失手指的情形。

2.根据权利要求1所述的方法，其特征在于，在将所述双手模型中被遮挡的手指模型补全之前，所述方法还包括：

对所述双手模型进行聚类，得到所述双手模型中手指指尖对应的两个簇，以将所述双手模型中的左右手进行区分。

3.根据权利要求2所述的方法，其特征在于，对所述双手模型进行聚类包括：

从所述双手模型的手指样本S＝{x₁,x₂...,x_n}中，把这些样本划分到k个聚类S₁,S₂,...S_k中，使得满足组内平方和最小，即：

其中t指的是迭代次数，m_i指的是第i个聚类的均值点，按照下面两个步骤更新各个聚类及其均值点：

步骤1：

其中，x_p指的是分配到确定聚类的元素；

步骤2：即计算上步得到的聚类中，每一聚类的质心作为新的均值点。

4.根据权利要求1所述的方法，其特征在于，按照下述公式计算所述目标手指的特征向量与缺失手指的各种情形之间的相似度：

其中，sim函数指的是两者的相似度，越接近1说明两者越相似，n指的是特征数量，X_i指的是当前样本的第i个特征，X_i'指的是标准模型的第i个特征。

5.根据权利要求1所述的方法，其特征在于，对所述表面键盘模型的键距进行自适应调节包括：

确定复合变换矩阵，所述复合变换矩阵中包括旋转矩阵、平移矩阵以及缩放矩阵；

利用所述复合变换矩阵，将所述表面键盘模型转换为自适应键盘模型；其中，所述复合变换矩阵中的参数根据所述自适应键盘模型与所述标准双手模型之间的位置关系确定。