[发明专利]教学视频处理方法、装置和电子设备有效
申请号: | 202110482496.0 | 申请日: | 2021-04-30 |
公开(公告)号: | CN113259763B | 公开(公告)日: | 2023-04-07 |
发明(设计)人: | 崔寅生;刘洋 | 申请(专利权)人: | 作业帮教育科技(北京)有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;G06V20/40;G06V30/14;H04N21/2187;H04N21/472 |
代理公司: | 北京清诚知识产权代理有限公司 11691 | 代理人: | 喻颖 |
地址: | 100085 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 教学 视频 处理 方法 装置 电子设备 | ||
1.一种教学视频处理方法,其特征在于,包括:
根据所述教学视频中相邻帧图像特征的变化对所述教学视频的多帧图像进行聚合处理,以形成图像帧集合;将各所述图像帧集合对应的各段所述教学视频转化为视频文本段信息;将各视频文本段信息输入训练好的知识点识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段;
将待处理的教学视频按知识点切分为视频段;
判断各视频段涉及的知识点是否相同或存在关联;
将知识点相同或存在关联的视频段拼接形成教学片段;
其中,所述知识点识别模型包括视频类型识别模型和与视频类型对应的知识识别模型,每个知识识别模型针对对应视频类型的视频文本段信息进行了知识点识别训练;
所述将各视频文本段信息输入训练好的知识点识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段,包括:
将所述视频文本段信息输入训练好的所述视频类型识别模型,输出各视频文本段信息的类型;
根据各视频文本段信息的类型将各视频文本段信息输入训练好的对应类型的知识识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段。
2.根据权利要求1所述的教学视频处理方法,其特征在于,所述将各所述图像帧集合对应的各段所述教学视频转化为视频文本段信息,包括:
提取所述教学视频中的语音信息,并将所述语音信息转化为第一文本信息;
将各所述图像帧集合中的图像信息转化为第二文本信息;
将每个所述第二文本信息与对应时间段的第一文本信息相结合形成所述视频文本段信息。
3.根据权利要求1所述的教学视频处理方法,其特征在于,所述视频类型包括知识点讲解和题目讲解;
所述知识识别模型包括第一知识识别模型及第二知识识别模型,其中,
所述第一知识识别模型用于识别知识点讲解的视频文本段信息涉及的知识点;
所述第二知识识别模型用于识别题目讲解的视频文本段信息涉及的知识点。
4.根据权利要求1-3任一项所述的教学视频处理方法,其特征在于,所述将待处理的教学视频按知识点切分为视频段,包括:
根据每个视频文本段信息涉及的各知识点的名称和对应的时间段,将待处理的教学视频按知识点切分为视频段。
5.根据权利要求1-3任一项所述的教学视频处理方法,其特征在于,所述判断各视频段涉及的知识点是否相同或存在关联,包括:
根据所述知识点的名称判断所有视频段涉及的知识点是否相同或存在关联。
6.根据权利要求1-3任一项所述的教学视频处理方法,其特征在于,所述教学片段包括一个知识点讲解和与该知识点相关联的题目讲解,和/或,
所述教学片段包括相关联的一个以上知识点讲解和与该些知识点相关联的题目讲解;
可选地,所述将知识点相同或存在关联的视频段拼接形成教学片段,包括:将知识点相同或存在关联的知识点视频段和题目视频段进行拼接形成教学片段;
可选地,将所述教学片段按所涉及的知识点命名;
可选地,各所述教学片段拼接成第二教学视频。
7.一种教学视频处理装置,其特征在于,包括:
知识点识别模块,用于根据所述教学视频中相邻帧图像特征的变化对所述教学视频的多帧图像进行聚合处理,以形成图像帧集合;将各所述图像帧集合对应的各段所述教学视频转化为视频文本段信息;将各视频文本段信息输入训练好的知识点识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段;
视频切分模块,用于将待处理的教学视频按知识点切分为视频段;
判断模块,用于判断各视频段涉及的知识点是否相同或存在关联;
视频剪辑模块,用于将知识点相同或存在关联的视频段拼接形成教学片段;
其中,所述知识点识别模型包括视频类型识别模型和与视频类型对应的知识识别模型,每个知识识别模型针对对应视频类型的视频文本段信息进行了知识点识别训练;
所述将各视频文本段信息输入训练好的知识点识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段,包括:
将所述视频文本段信息输入训练好的所述视频类型识别模型,输出各视频文本段信息的类型;
根据各视频文本段信息的类型将各视频文本段信息输入训练好的对应类型的知识识别模型,输出得到每个视频文本段信息涉及的各知识点的名称和对应的时间段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于作业帮教育科技(北京)有限公司,未经作业帮教育科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110482496.0/1.html,转载请声明来源钻瓜专利网。