[发明专利]基于骨架分析的鱼群三维跟踪方法

说明书

本发明公开了一种基于骨架分析的鱼群三维跟踪方法，涉及信息技术领域，该基于骨架分析的鱼群三维跟踪方法以顶视方向的跟踪为主，侧视方向的检测结果不用于跟踪，只用来与顶视跟踪结果做立体匹配，降低跟踪方法的复杂性，提高跟踪效率。该基于骨架分析的鱼群三维跟踪方法仅需要两台摄像机就能够对鱼群目标进行有效的三维跟踪，不但具有较高的准确性，而且具有较快的跟踪速度。

技术领域

本发明涉及信息技术领域，具体来说涉及一种基于骨架分析的鱼群三维跟踪方法。

背景技术

参考文献Qian Z M，Chen Y Q.Feature point based 3D tracking of multiplefish from multi-view images[J].PloS one，2017，12(6)：e0180254中提出了一种基于三视图的鱼群三维跟踪方法。该方法首先利用骨架分析将多视图中的目标简化为特征点表示，然后，根据得到的特征点模型，以顶视方向的跟踪为主，两个侧视方向的跟踪作为参考，对目标进行匹配和关联，最终得到目标在三维空间中的运动轨迹。

在参考文献的跟踪方法中，当顶视图出现遮挡时，该方法使用两个侧视方向的跟踪结果对遮挡前后的目标进行关联，这样处理的优势是可以提高遮挡跟踪的性能，使跟踪结果更为可靠，但这是以牺牲跟踪效率为代价的，如果顶视图的目标没有发生遮挡，则侧视图中的跟踪就不是必要的。

发明内容

本发明所要解决的技术问题是提供一种基于骨架分析的鱼群三维跟踪方法，以顶视方向的跟踪为主，侧视方向的检测结果不用于跟踪，只用来与顶视跟踪结果做立体匹配，降低跟踪方法的复杂性，提高跟踪效率。

为实现上述目的，本发明提供以下的技术方案：

该基于骨架分析的鱼群三维跟踪方法包括如下步骤：

(1)使用骨架端点附近的多个点来估算目标的运动方向，假设骨架端点为p(x，y)，定义端点段es为邻近端点的n个骨架点es＝{(x_i，y_i)|i＝1，...，n}，端点段的方向可以根据最小二乘法计算得到，

联合骨架端点p和端点段方向θ组成的特征点F(p，θ)可以对目标进行表示；

(2)在目标的头尾两个特征点中，可以根据形状的不对称性去除顶视图中目标的尾部特征点，而对于侧视方向，依然保留头尾两个特征点；

(3)对顶视图相邻帧间的特征点进行数据关联，得到顶视二维跟踪轨迹。接下来，使用顶视跟踪轨迹和目标在侧视方向的特征点进行立体匹配，即可得到目标在三维空间中的位置，为解决立体匹配的不确定性问题，使用运动连续性来完成立体匹配；

假设和分别表示顶视图和侧视图中的一个特征点，如果在极线约束下，在侧视图中存在k个可能匹配的候选特征点，则将运动连续性约束定义如下：

其中，表示t-1时刻与顶视图的特征点相匹配的侧视图的特征点。pc_max和dc_max分别表示相邻帧目标的最大运动距离和最大偏转角度，和分别表示特征点和之间的位置和方向的变化，w和(1-w)分别表示位置和方向在代价函数中所占权重。上式表示，在侧视图的k个候选特征点中，选择与前一时刻的匹配点具有最佳运动连续性的特征点作为当前时刻的匹配点。

采用以上技术方案的有益效果是：该基于骨架分析的鱼群三维跟踪方法以顶视方向的跟踪为主，侧视方向的检测结果不用于跟踪，只用来与顶视跟踪结果做立体匹配，降低跟踪方法的复杂性，提高跟踪效率。该基于骨架分析的鱼群三维跟踪方法仅需要两台摄像机就能够对鱼群目标进行有效的三维跟踪，不但具有较高的准确性，而且具有较快的跟踪速度。

附图说明