[发明专利]一种多媒体互动方法、装置、设备及存储介质在审
申请号: | 202010352029.1 | 申请日: | 2020-04-28 |
公开(公告)号: | CN111586490A | 公开(公告)日: | 2020-08-25 |
发明(设计)人: | 张宁;李晓波;邹雨竹 | 申请(专利权)人: | 上海商汤临港智能科技有限公司 |
主分类号: | H04N21/6371 | 分类号: | H04N21/6371;H04N21/647;H04N21/414;H04N21/431;H04N21/433;H04N21/435;H04N21/439;H04N21/44;H04N21/4402;H04N21/442;H04N21/443;G09B5/06 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 何倚雯 |
地址: | 200232 上海市浦东新区自由贸易试验区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 多媒体 互动 方法 装置 设备 存储 介质 | ||
本公开公开了一种多媒体交互方法、装置、设备及存储介质,其中所述方法包括:调用教学平台的多媒体交互组件;利用所述多媒体交互组件获取到控制指令;利用所述多媒体交互组件基于所述控制指令进行信息提取;将提取的信息通过所述多媒体交互组件进行显示或播放。其无需借助外部设备即可实现多媒体的互动,进而使得网络教学效果更佳。
技术领域
本公开涉及人工智能技术领域,具体涉及一种多媒体交互方法、装置、设备及存储介质。
背景技术
近年来,随着人工智能的普及,网络教学平台越来越普及,而网络教学通常会需要老师与学生,或学生与学生之间具有互动,从而使得教学效果及体验更佳。
但是为实现教学平台的互动,通常需要额外的专用的设备,以此会产生成本增加,操作不便等问题。
发明内容
本公开提供一种多媒体互动方法、装置、设备及存储介质。
本公开提供的第一个技术方案为:提供一种多媒体互动方法,包括:调用教学平台的多媒体交互组件;利用所述多媒体交互组件获取到控制指令;利用所述多媒体交互组件基于所述控制指令进行信息提取;将提取的信息通过所述多媒体交互组件进行显示或播放。以此使得在教学平台进行互动时,不借助额外设备,便于进行信息获取,使得网络教学效果更佳。
其中,所述利用所述多媒体交互组件获取到控制指令包括:所述控制指令包括图像拍摄控制指令、视频录制控制指令、音频录制控制指令中的至少一种。以此使得在教学平台进行互动时,不借助额外设备,即可方便快捷地获取图像、视频或音频信息,使得网络教学效果更佳。
其中,所述利用所述多媒体交互组件基于所述控制指令进行信息提取包括:在所述控制指令为图像拍摄控制指令的情况下,根据所述图像拍摄控制指令触发摄像装置以获取一帧图像;和/或在所述控制指令为视频录制控制指令的情况下,根据所述视频录制控制指令触发摄像装置以获取多帧图像;和/或在所述控制指令为音频录制控制指令的情况下,根据所述音频录制控制指令触发录音装置以进行音频录制。以此使得在教学平台进行互动时,可以直接利用多媒体交互组件进行视频录制、图像拍摄、音频录制,其不借助额外设备,提高信息获取的便捷程度,使得网络教学效果更佳。
其中,所述在所述控制指令为视频录制控制指令的情况下,根据所述视频录制控制指令触发摄像装置以获取多帧图像之后还包括:获取所述多帧图像的每秒传输帧数,将所述多帧图像通过所述每秒传输帧数按照帧数与时间的对应关系进行选择性播放。以此使得在教学平台进行互动时,可以根据图像传输帧数进行播放,使得视频呈现更顺畅,使互动效果更加灵活。
其中,所述在所述控制指令为视频录制控制指令或图像拍摄控制指令的情况下,所述将提取的信息通过所述多媒体交互组件进行显示或播放的步骤包括:根据所述多帧图像的获取时间先后顺序依次播放所述多帧图像;或者将所述多帧图像进行合成,以形成视频文件,并播放所述视频文件。使得多帧图像播放流畅,同时节省了图像保存成视频文件的处理时间和过程。或者将所述多帧图像进行合成视频文件,并播放所述视频文件,以使得视频可以正常播放。
其中,所述利用所述多媒体交互组件基于所述控制指令进行信息提取的步骤包括:利用所述多媒体交互组件基于所述控制指令从预先存储的预置信息中提取所述信息。通过多媒体交互组件调用本地预置的语音或者预置的图像模仿录音或图像的方式,不需要把学生的录像和照片等多媒体文件上传到服务器进行处理的过程,因此,教学互动不需要依赖大的带宽,同时实时性较好。
其中,所述利用所述多媒体交互组件基于所述控制指令进行信息提取还包括:根据所述控制指令,设置定时器的定时时间;在到达所述定时器的定时时间段的情况下,控制所述多媒体交互组件进行信息提取。以此使得在教学平台进行互动时,使互动效果更加灵活。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤临港智能科技有限公司,未经上海商汤临港智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010352029.1/2.html,转载请声明来源钻瓜专利网。