[发明专利]一种多媒体互动方法、装置、设备及存储介质在审
申请号: | 202010352029.1 | 申请日: | 2020-04-28 |
公开(公告)号: | CN111586490A | 公开(公告)日: | 2020-08-25 |
发明(设计)人: | 张宁;李晓波;邹雨竹 | 申请(专利权)人: | 上海商汤临港智能科技有限公司 |
主分类号: | H04N21/6371 | 分类号: | H04N21/6371;H04N21/647;H04N21/414;H04N21/431;H04N21/433;H04N21/435;H04N21/439;H04N21/44;H04N21/4402;H04N21/442;H04N21/443;G09B5/06 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 何倚雯 |
地址: | 200232 上海市浦东新区自由贸易试验区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 多媒体 互动 方法 装置 设备 存储 介质 | ||
1.一种多媒体互动方法,其特征在于,包括:
调用教学平台的多媒体交互组件;
利用所述多媒体交互组件获取到控制指令;
利用所述多媒体交互组件基于所述控制指令进行信息提取;
将提取的信息通过所述多媒体交互组件进行显示或播放。
2.根据权利要求1所述的多媒体互动方法,其特征在于,
所述控制指令包括图像拍摄控制指令、视频录制控制指令、音频录制控制指令中的至少一种。
3.根据权利要求2所述的多媒体互动方法,其特征在于,所述利用所述多媒体交互组件基于所述控制指令进行信息提取包括:
在所述控制指令为图像拍摄控制指令的情况下,根据所述图像拍摄控制指令触发摄像装置以获取一帧图像;和/或
在所述控制指令为视频录制控制指令的情况下,根据所述视频录制控制指令触发摄像装置以获取多帧图像;和/或
在所述控制指令为音频录制控制指令的情况下,根据所述音频录制控制指令触发录音装置以进行音频录制。
4.根据权利要求3所述的多媒体交互方法,其特征在于,所述在所述控制指令为视频录制控制指令的情况下,根据所述视频录制控制指令触发摄像装置以获取多帧图像之后还包括:
获取所述多帧图像的每秒传输帧数,将所述多帧图像通过所述每秒传输帧数按照帧数与时间的对应关系进行选择性播放。
5.根据权利要求3所述的多媒体交互方法,其特征在于,所述在所述控制指令为视频录制控制指令或图像拍摄控制指令的情况下,所述将提取的信息通过所述多媒体交互组件进行显示或播放的步骤包括:
根据所述多帧图像的获取时间先后顺序依次播放所述多帧图像;或者
将所述多帧图像进行合成,以形成视频文件,并播放所述视频文件。
6.根据权利要求1所述的多媒体互动方法,其特征在于,所述利用所述多媒体交互组件基于所述控制指令进行信息提取的步骤包括:
利用所述多媒体交互组件基于所述控制指令从预先存储的预置信息中提取所述信息。
7.根据权利要求1-6任一项所述的多媒体互动方法,其特征在于,所述利用所述多媒体交互组件基于所述控制指令进行信息提取还包括:
根据所述控制指令,设置定时器的定时时间;
在到达所述定时器的定时时间段的情况下,控制所述多媒体交互组件进行信息提取。
8.根据权利要求1所述的多媒体互动方法,其特征在于,所述将提取的信息通过所述多媒体交互组件进行显示或播放之后还包括:
控制进行显示或播放的窗口进行位置移动、窗口缩放、窗口隐藏中任意一项操作。
9.根据权利要求1所述的多媒体交互方法,其特征在于,所述将提取的信息通过所述多媒体交互组件进行显示或播放还包括:
通过所述多媒体交互组件获取预设代码,并根据所述预设代码对提取的所述信息进行预处理;
将预处理后的信息通过所述多媒体交互组件进行显示或播放。
10.根据权利要求9所述的多媒体交互方法,其特征在于,所述预处理包括:
对获取的所述一帧图像或所述多帧图像进行图像处理操作;和/或
对获取的所述音频进行语音降噪、语音转文字、语音合成中至少一种操作。
11.根据权利要求1-10任一项所述的多媒体交互方法,其特征在于,所述将提取的信息通过所述多媒体交互组件进行显示或播放之后还包括:
从正在播放的所述多帧图像或所述一帧图像中获取一帧图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤临港智能科技有限公司,未经上海商汤临港智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010352029.1/1.html,转载请声明来源钻瓜专利网。