[发明专利]赛事自动化报道方法、系统、服务器及存储介质

说明书

本发明公开了一种结果赛事自动化报道方法、系统及计算机可读存储介质，通过利用关键帧、关键事件检测模型和事件主体识别引擎对于赛事直播视频进行识别，获取赛事过程中关键事件对应类型、时间和事件主体，使得便于自动形成报道和赛事集锦，不需要编辑对于每一场赛事直播都进行人工地观看，并进行剪辑或形成新闻报道，一方面在节省人工成本的情况下增加了新闻报道的覆盖面，且可以直接对赛事直播视频进行处理，形成的新闻报道和赛事集锦的时效性也会更高。

技术领域

本发明涉及赛事直播数据处理技术领域，具体涉及一种赛事自动化报道方法、系统及计算机可读存储介质。

背景技术

目前广电、互联网等渠道进行的赛事直播中，展现形式均为直播数据流在设备或播放器中进行展示，赛事相关信息通过解说员口播、编辑的画面字幕和新闻报道等传统方式触达用户。但由于直播信号特有的“时间不可逆”的属性，相关数据无法进行复现，中途进入直播的用户难以方便地了解到相关信息，即使在互联网渠道进行的赛事直播，可以回放全部的视频，也无法准确地定位体育赛事直播过程中发生的关键事件,并且例如足球赛事，大多数比赛时间并不是精彩集锦所需的片段，时间利用效率低。

为了能让用户能方便地了解体育赛事直播过程中发生的关键事件(例如足球比赛中的进球、红牌罚下等)，现有的直播平台都需要通过新闻编辑人工地对体育赛事直播过程中发生的关键事件进行判断并进行剪辑，然后进行拼接配乐等后期处理后，制作成视频集锦，或者形成新闻报道，但这需要额外的时间，因此在无法让用户在发生关键事件后第一时间看到相关的视频集锦和新闻报道，无法满足互联网新闻报道更强的实时性要求。此外，例如足球比赛，中国有中超、中甲、中乙等多级赛事，英国有英超、英冠、英甲、英乙等多级赛事，每个联赛每一轮有十几场比赛，且因为时差的原因，不可能所有的场次都安排新闻编辑进行剪辑或报道，大量的赛事信息无法及时报道或提供赛事剪辑，因此直播平台或新闻网站损失了很多潜在的用户。

发明内容

本发明的目的就在于为了解决上述问题而提供一种赛事自动化报道方法、系统、服务器及存储介质。

为实现上述目的，本发明提供了一种赛事自动化报道方法，包括：

获取赛事直播视频流；

利用关键事件检测模型获取赛事过程中关键事件的类型和发生时间；

利用事件主体识别引擎获取赛事过程中关键事件对应的事件主体；

基于所述关键事件的类型、发生时间和事件主体，生成新闻报道素材。

可选的，所述关键事件检测模型的形成方法包括：

定义关键事件的标签；

搜集该标签所定义的赛事视频片段数据；

利用搜集到的赛事视频片段数据进行机器学习训练，使得所述关键事件检测模型具备对关键事件视频的类型的分类能力。

可选的，所述关键事件检测模型的形成方法还包括：

利用搜集到的赛事视频片段关键帧数据进行机器学习训练，使得所述关键事件检测模型具备对视频进行特征编码的能力和对关键事件视频的类型的分类能力；

将所述深度机器学习模型作为视频特征编码器，对赛事视频片段进行重新编码，得到新的视频特征序列；

基于所述新的视频特征序列，训练关键事件检测模型，使得所述关键事件检测模型具备对所述关键事件的开始时间和结束时间进行判断的能力。

可选的，利用事件主体识别引擎获取赛事过程中关键事件对应的事件主体的具体方法包括：

获取赛事直播视频流中的视频帧；

对每一帧视频帧检测是否有主体并形成主体边框，对于主体边框内的主体进行识别；