[发明专利]一种基于对比度的弱监督时序动作定位评价方法及系统

摘要

本发明公开了一种基于对比度的弱监督时序动作定位评价方法及系统，属于计算机视觉与模式识别领域，包括：首先对视频中存在的对比度信息进行建模；然后利用对比度得到片段级别的边缘度度量；最后利用得到的边缘度和已知的片段级别动作分类结果对任意一个候选视频段进行打分。本发明综合考虑了开始，结束和内容三个方面，最终给出了具有较高的可靠性的评价结果；借助评价结果，时序动作定位的准确率可以得到极大提高。本发明可在弱监督条件下对任意一个视频时间段的动作定位效果进行综合评价，只需要视频级别的类别标注，不依赖复杂的动作边界标注数据，能够大大减轻数据的标注负担。

主权项

1.一种基于对比度的弱监督时序动作定位评价方法，其特征在于，包括以下步骤：步骤1，获取片段级别的动作分类预测和片段级别的注意力分数预测利用最大值池化获得目标类别动作分类预测的局部最大值及其所在的时序位置，利用最小值池化获得目标类别动作分类预测的局部最小值及其所在的时序位置；步骤2，对步骤1获得的局部最大值和局部最小值隐含的局部对比度信息进行显示建模，获得表示对比度强度的度量以及表示对比度正负的符号函数步骤3，将步骤2获得的表示对比度强度的度量和表示对比度正负的符号函数进行逐点相乘，获得片段级别的边缘度度量步骤4，利用第i类动作的片段级别预测和步骤3得到的对视频中的任意起始时间位置的片段中第i类动作的定位效果进行评估。