[发明专利]一种移动终端及其交互控制方法

权利要求书

1.一种移动终端的交互控制方法，其特征在于，包括：

从移动终端的非显示屏一侧采集包含交互对象的目标区域的深度图像，利用投影模组向所述交互对象投影不可见光图像，投影模组向交互对象投影不规则的散斑图案，利用采集模组从移动终端的非显示屏一侧采集包含交互对象的目标区域的不可见光图像，根据所述不可见光图像，获取所述目标区域的深度信息，从而得到所述深度图像；

所述根据所述不可见光图像，获取所述目标区域的深度信息，从而得到所述深度图像，包括：

对所述不可见光图像以及预存的参考图像进行相关计算，得到所述不可见光图像与所述参考图像的偏移值；

根据所述偏移值以及预存的采集设备参数计算得到所述不可见光图像中每个像素的深度值，根据以下公式计算得到所述不可见光图像中每个像素的深度值：

其中，Z_D所述不可见光图像中每个像素点的深度值，Z₀为所述参考图像中每个像素点的深度值，B为所述投影模组与所述采集模组之间的距离，f为所述采集模组的焦距，Δu为所述偏移值，以得到所述深度图像；

其中，所述采集设备包括所述投影模组以及所述采集模组；

在所述深度图像中识别所述交互对象的动作，并将识别结果转化为相应的控制指令；

执行所述控制指令；

其中，所述交互对象为手指，所述在所述深度图像中识别所述交互对象的动作，并将识别结果转化为相应的控制指令，包括：

对所述深度图像进行预处理；

从所述深度图像中提取出所述交互对象的图像部分；

对所述手指的图像部分进行处理，以提取所述手指的骨架图像；

对所述骨架图像进行定位，以确定所述手指的指尖位置；

根据所述手指的指尖位置、所述手指的指尖运动轨迹以及所述手指的骨架图像中的至少一种，确定所述手指的手势或运动轨迹；

根据所述手指的手势或运动轨迹，生成相应的控制指令。

2.根据权利要求1所述的交互控制方法，其特征在于，

所述从移动终端的非显示屏一侧采集包含交互对象的目标区域的深度图像，包括：

利用激光发射模组向所述交互对象发射激光；

利用激光接收模组从移动终端的非显示屏一侧接收反射激光；

根据发射激光以及接收反射激光的时间差来计算得到包含交互对象的目标区域的深度信息，以得到所述深度图像。

3.根据权利要求1所述的交互控制方法，其特征在于，

所述移动终端的非显示屏一侧为与所述移动终端的显示屏相对的一侧；

所述执行所述控制指令，包括：

根据所述控制指令，控制所述显示屏执行相应的显示操作。

4.一种移动终端，其特征在于，包括：

深度图像采集器，设置于所述移动终端的非显示屏一侧，用于采集包含交互对象的目标区域的深度图像，利用投影模组向所述交互对象投影不可见光图像，投影模组向交互对象投影不规则的散斑图案，利用采集模组从移动终端的非显示屏一侧采集包含交互对象的目标区域的不可见光图像，根据所述不可见光图像，获取所述目标区域的深度信息，从而得到所述深度图像；所述根据所述不可见光图像，获取所述目标区域的深度信息，从而得到所述深度图像，包括：

对所述不可见光图像以及预存的参考图像进行相关计算，得到所述不可见光图像与所述参考图像的偏移值；

根据所述偏移值以及预存的采集设备参数计算得到所述不可见光图像中每个像素的深度值，根据以下公式计算得到所述不可见光图像中每个像素的深度值：

其中，Z_D所述不可见光图像中每个像素点的深度值，Z₀为所述参考图像中每个像素点的深度值，B为所述投影模组与所述采集模组之间的距离，f为所述采集模组的焦距，Δu为所述偏移值，以得到所述深度图像；所述交互对象为手指；

处理器，用于在所述深度图像中识别所述交互对象的动作，并将识别结果转化为相应的控制指令，所述处理器具体用于：

对所述深度图像进行预处理；

从所述深度图像中提取出所述交互对象的图像部分；

对所述手指的图像部分进行处理，以提取所述手指的骨架图像；

对所述骨架图像进行定位，以确定所述手指的指尖位置；

根据所述手指的指尖位置、所述手指的指尖运动轨迹以及所述手指的骨架图像中的至少一种，确定所述手指的手势或运动轨迹；

根据所述手指的手势或运动轨迹，生成相应的控制指令；

所述处理器还用于执行所述控制指令。