[发明专利]采集媒体数据的方法、媒体终端及音乐教学系统

说明书

本发明公开了采集媒体数据的方法、媒体终端及音乐教学系统。媒体终端包括视频采集单元、视频缓冲区、音频采集单元、音频缓冲区、发送缓冲区、传输单元和控制单元。视频采集单元采集图像并编码为视频帧。视频缓冲区适于存放视频帧。音频采集单元采集声音并编码为音频帧。音频缓冲区适于存放音频帧。发送缓冲区存放待发送的数据帧。每个数据帧为视频帧或音频帧。传输单元适于将待发送的数据帧传输到媒体服务器。控制单元适于检测音频缓冲区并将其中的音频帧推送到发送缓冲区中。在音频缓冲区为空时，如果待发送数据帧的数量未超过阈值且视频缓冲区不为空，控制单元从视频缓冲区提取视频帧并推送到发送缓冲区。

技术领域

本发明涉及通信领域，尤其涉及采集媒体数据的方法、媒体终端及音乐教学系统。

背景技术

目前，在例如视频会议或网络直播等实时通信方案中，采集媒体数据的终端可以采集视频帧和音频帧等媒体数据，并向播放端传输媒体数据。例如可以将视频帧和音频帧进行一起封装后通网络传输。或者，终端将视频帧和音频帧各自进行封装并进行传输。

然而，现有的网络状况是复杂多变的，例如存在网络抖动、间歇中断等问题。采集终端在通过网络发送音频和视频数据时，存在网络延时、网络阻塞等问题。因此，媒体播放端从采集终端获取音频和视频数据时，面临卡断不流畅的问题。

发明内容

为此，本发明提供一种新的采集媒体数据的方案，有效的解决了上面至少一个问题。

根据本发明的一个方面，提供一种媒体终端，包括视频采集单元、视频缓冲区、音频采集单元、音频缓冲区、发送缓冲区、传输单元和控制单元。视频采集单元适于采集图像并编码为视频帧。视频缓冲区适于存放来自视频采集单元的视频帧。音频采集单元适于采集声音并编码为音频帧。音频缓冲区适于存放来自音频采集单元的音频帧。发送缓冲区适于存放一个或多个待发送的数据帧。其中每个待发送数据帧为来自视频缓冲区的视频帧或来自音频缓冲区的音频帧。传输单元适于将一个或多个待发送的数据帧传输到媒体服务器。控制单元适于检测音频缓冲区并将其中的音频帧推送到发送缓冲区中，并在音频缓冲区为空时，判断是否发送缓冲区中待发送数据帧的数量未超过阈值且视频缓冲区不为空。如果待发送数据帧的数量未超过阈值且视频缓冲区不为空，控制单元从视频缓冲区中提取一帧视频帧并推送到发送缓冲区中。

根据本发明的又一个方面，提供一种采集媒体数据的方法。该方法适于在媒体终端中执行。该媒体终端包括发送缓冲区。发送缓冲区适于存放一个或多个待发送的数据帧。其中每个待发送的数据帧为视频帧或音频帧。该方法包括以下步骤。采集图像并编码为视频帧，并将该视频帧存放到视频缓冲区中。采集声音并编码为音频帧，并将该音频帧存放音频缓冲区中。检测音频缓冲区并将其中的音频帧推送到发送缓冲区中。如果音频缓冲区为空，则判断是否发送缓冲区中待发送数据帧的数量未超过阈值且视频缓冲区不为空。如果待发送的数据帧的数量未超过阈值且视频缓冲区不为空，则从该视频缓冲区中提取一帧视频帧并推送到发送缓冲区中。将所述一个或多个待发送的数据帧传输到媒体服务器。

根据本发明的又一个方面，提供一种音乐教学系统，包括根据本发明的媒体终端、媒体服务器和媒体播放端。媒体服务器适于接收媒体终端发送的音频帧和视频帧。媒体播放端适于从媒体服务器获取并播放音频帧和视频帧。