[发明专利]从数字电视节目中自动抽取图像的系统及其应用

说明书

技术领域

本发明涉及数字电视技术领域，特别是涉及一种从数字电视节目中自动抽取图像的系统及其应用。

背景技术

视频可以理解为在时间上连续的图像序列，通过调查和试验发现，在对数字电视的视频内容进行理解时，并非所有的图像都起着同样重要的作用。真正对数字电视视频的理解起到重要作用的图像有以下几类：

●有对应字幕的帧；

●发生场景切换的帧；

●有人脸出现的帧；

●有人物对象出现的帧；

●有一定运动幅度的帧；

●有对应语音出现的帧。

上述图像可以作为判断是否为对数字电视视频的理解起到重要作用图像的条件，可以根据用户的需求加以组合，最终定义出“关键帧”，该“关键帧”至少符合其中一个条件或全部条件。

因此，如何从数字电视的视频信号中自动抽取出对内容的理解有重要意义的“关键帧”，正是本发明和业内人士关注的问题。

发明内容

本发明要解决的技术问题是提供一种从数字电视节目中自动抽取图像的系统，能够从数字电视的视频信号中自动抽取出对内容的理解有代表意义的“关键帧”，结构简单，容易实现。

为解决上述技术问题，本发明的从数字电视节目中自动抽取图像的系统，包括数字电视接收终端，该数字电视接收终端包括解复用模块、视频解码模块、字幕解析模块、音频解码模块、视频显示模块和音频显示模块；其中，还包括：

图像判别模块，与所述视频解码模块相连接，用于接收视频解码模块的输出帧；通过场景切换检测、人脸检测、运动检测和人物对象检测算法分析视频数据；

字幕判别模块，与所述字幕解析模块相连接，接收字幕解析模块的解析结果，确定在当前时刻字幕是否存在；

语音判别模块，与所述音频解码模块相连接，接收音频解码模块输出的音频数据，判断当前收到的音频数据是否是话音；

关键视频帧和话音提取模块，与所述图像判别模块、字幕判别模块、语音判别模块、视频解码模块和音频解码模块相连接；接收视频数据分析检测的结果、字幕判别的结果和话音判别的结果，以及音频和视频数据，判断接收到的当前视频是否有字幕，接收到的当前视频是否有对应话音，根据用户的设置和视频数据分析检测的结果、字幕判别的结果和话音判别的结果提取出关键视频帧和相关话音。

采用本发明的从数字电视节目中自动抽取图像的系统，可以从数字电视的视频信号中自动抽取出对内容的理解有代表意义的“关键帧”，对这些关键帧可以降低分辨率并进行特殊效果处理，如“油画”、“卡通”等效果；再配以字幕和语音，在数字电视的基本内容可以理解的前提下极大地减少数据量并增加趣味性，最终的用途包括：

●配合字幕和语音制作成电子书籍；

●配合字幕打印并制作成卡通画；

●配合字幕并和语音复用后制作成小分辨率，定期显示图像的视频文件在移动设备上播放。

附图说明

下面结合附图与具体实施方式对本发明作进一步详细的说明：

图1是本发明的结构原理框图；

图2-图7是采用本发明进行图像处理前后的效果对比图。

具体实施方式

参见图1所示，本发明的从数字电视节目中自动抽取图像的系统包括，数字电视接收终端以及图像判别模块、字幕判别模块、语音判别模块和关键视频帧和话音提取模块。

所述数字电视接收终端是现有的标准框架，其中不包括信道调谐、解调制部分。所述数字电视接收终端包括解复用模块、视频解码模块、字幕解析模块、音频解码模块、视频显示模块和音频显示模块。

所述解复用模块，用于解析系统层如TS流(MPEG2 System Layer)，分离出音频基本流、视频基本流和字幕信息，分别输入到音频解码器、视频解码器和字幕解析模块。

所述视频解码模块，与解复用模块相连接，用于将视频压缩流解码后输出用于后处理或播放的视频数据。

所述字幕解析模块，与解复用模块相连接，用于将字幕信息转换成可以显示的形式。

所述音频解码模块，与解复用模块连接，用于将音频压缩流解码后输出用于后处理或播放的音频数据。

所述视频显示模块，与视频解码模块和字幕解析模块相连接，用于将视频信息和字幕信息显示给用户。

所述音频显示模块，与音频解码模块相连接，用于音频信息的播放。