[发明专利]视频异常检测、模型训练方法、设备、模型及存储介质在审
申请号: | 202011321517.2 | 申请日: | 2020-11-23 |
公开(公告)号: | CN113515993A | 公开(公告)日: | 2021-10-19 |
发明(设计)人: | 奚佳丽;李新哲;周芹;陶明渊;周昌;黄建强;华先胜 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 北京太合九思知识产权代理有限公司 11610 | 代理人: | 张爱;刘戈 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 异常 检测 模型 训练 方法 设备 存储 介质 | ||
本申请实施例提供一种视频异常检测、模型训练方法、设备、模型及存储介质。在本申请实施例中,以目标场景下的正常视频样本作为训练样本,利用检测模型预测正常视频样本中至少一个样本视频帧的样本未来帧的视觉特征,并计算样本视频帧和对应的样本未来帧之间的视觉特征误差;以视觉特征误差在时域上的波动状态达到目标状态为约束条件,对检测模型进行训练。据此,训练后的检测模型可保证目标场景下正常视频的视觉特征误差在时域上的波动状态趋于目标状态,而异常视频的视觉特征误差在时域上的波动状态则会偏离目标状态,基于此,可将视觉特征误差的时域波动情况作为判断视频中是否出现异常的有效依据,从而快速准确地分辨出目标场景下异常视频。
技术领域
本申请涉及视频处理技术领域,尤其涉及一种视频异常检测、模型训练方法、设备、模型及存储介质。
背景技术
视频异常检测旨在自动感知视频序列中的异常事件。
在自然场景中,异常事件可能导致危险,甚至可能造成严重损坏,例如火灾、爆炸等,因此,在实践中,很难获得大量的包含异常事件的训练样本。这样,在异常数据严重缺乏的情况下,使用传统的全监督方式训练出的检测模型性能不佳,甚至可能无法完成训练。
因此,亟需一种能够改善视频异常检测困境的方案。
发明内容
本申请的多个方面提供一种视频异常检测、模型训练方法、设备、模型及存储介质,用以提高视频异常检测的准确度。
本申请实施例提供一种模型训练方法,包括:
将目标场景下的正常视频样本输入用于视频异常检测的检测模型;
利用所述检测模型,分别预测所述正常视频样本中至少一个样本视频帧的样本未来帧的视觉特征;并计算所述至少一个样本未来帧与其在所述正常视频样本中对应的样本视频帧之间的视觉特征误差;
以所述视觉特征误差在时域上的波动状态达到目标状态为第一约束条件,对所述检测模型进行训练,以供所述检测模型获得所述目标场景下的模型参数。
本申请实施例还提供一种视频异常检测方法,适用于检测模型,包括:
获取待检测视频;
分别预测所述待检测视频中至少一个视频帧的未来帧的视觉特征;
计算所述至少一个未来帧与其在所述待检测视频帧中对应的视频帧之间的视觉特征误差;
若所述视觉特征误差在时域上的波动状态存在不满足目标状态的异常状态,则确定所述待检测视频存在异常;
其中,所述目标状态为在所述检测模型进行训练过程中针对正常视频的视觉特征误差在时域上的波动状态设定的约束条件。
本申请实施例还提供一种视频异常检测方法,包括:
响应于调用目标服务的请求,确定所述目标服务对应的处理资源,利用所述目标服务对应的处理资源执行如下步骤:
获取待检测视频;
分别预测所述待检测视频中至少一个视频帧的未来帧的视觉特征;
计算所述至少一个未来帧与其在所述待检测视频帧中对应的视频帧之间的视觉特征误差;
若所述视觉特征误差在时域上的波动状态存在不满足目标状态的异常状态,则确定所述待检测视频存在异常;
其中,所述目标状态为在所述检测模型进行训练过程中针对正常视频的视觉特征误差在时域上的波动状态设定的约束条件。
本申请实施例还提供一种检测模型,包括编码器、记忆单元和处理器;
所述编码器,用于获取待检测视频;并提取所述待检测视频中至少一个视频帧的视觉特征;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011321517.2/2.html,转载请声明来源钻瓜专利网。