[发明专利]一种音视频同步的方法及终端

说明书

一种音视频同步的方法，包括：终端在发起视频呼叫后，确定所述终端的音频功能模块和应用软件无法基于网络时间协议进行同步或者呼叫接收终端为音视频分离；所述终端的音频功能模块向所述呼叫接收终端发送音频流；所述终端的应用软件向所述呼叫接收终端发送校准音频流和所述校准音频流的时间戳并发送视频流和所述视频流的时间戳。通过本发明的方法可以实现音视频源分离的音视频通话过程中的音视频同步问题，解决很大部分强势终端厂家不开放视频能力的限制，同时也极大程度提高用户VoLTE和IMS的使用体验。

技术领域

本发明涉及通讯技术领域，特别是涉及一种音视频同步的方法及终端。

背景技术

音视频是分离的媒体源，存在音视频同步问题。该同步问题属于融合通信一个关键技术。同步是多媒体通信的主要特征，也是其重要研究内容之一，同步与否直接影响多媒体通信的质量。媒体间同步即是要保持音频流和视频流之间的时间关系。为了描述同步，实现相关的控制机制，定义了相应的服务质量(QoS)参数。针对音视频，采用时间差即偏差来表示。结果表明，如果偏差限制在一定的范围内，认为媒体是同步的。当偏移在-90ms(音频滞后于视频)到+20ms(音频超前视频)之间时，人感觉不到试听质量的变化，这个区域可以认为是同步区域；当偏移在-185到+90之外时，音频和视频会出现严重的不同步现象，此区域认为是不同步区域。

音视频媒体间同步是多媒体系统服务质量研究中的一项重要内容。在网络上传输多媒体数据时，由于终端对数据的处理方式，以及网络中的延时、抖动，会引起音视频流的不同步。

发明内容

本发明要解决的技术问题是提供一种音视频同步的方法及终端，以解决音视频同步问题。

一种音视频同步的方法，包括：

终端在发起视频呼叫后，确定所述终端的音频功能模块和应用软件无法基于网络时间协议进行同步或者呼叫接收终端为音视频分离；

所述终端的音频功能模块向所述呼叫接收终端发送音频流；

所述终端的应用软件向所述呼叫接收终端发送校准音频流和所述校准音频流的时间戳并发送视频流和所述视频流的时间戳。

可选地，所述终端的应用软件发送的校准音频流为按第一时间间隔采样的音频流。

可选地，所述确定所述终端的音频功能模块和应用软件无法基于网络时间协议进行同步或者呼叫接受终端为音视频分离后，还包括：

所述终端在音频输入通道中按第二时间间隔加入超声波脉冲；

所述终端的音频功能模块发送的音频流包括所述超声波脉冲，所述终端的应用软件发送的校准音频流包括所述超声波脉冲。

可选地，所述终端的应用软件发送校准音频流之前，还包括：

过滤所述校准音频流中的非脉冲部分。

可选地，所述校准音频流的时间戳和所述视频流的时间戳为所述终端本地的时间戳或者为指定网络时间协议服务器的时间戳。

一种终端，包括：

确定模块，用于在发起视频呼叫后，确定所述终端的音频功能模块和应用软件无法基于网络时间协议进行同步或者呼叫接受终端为音视频分离；

所述音频功能模块，用于向所述呼叫接收终端发送音频流；

所述应用软件，用于向所述呼叫接收终端发送校准音频流和所述校准音频流的时间戳，并发送视频流和所述视频流的时间戳。

可选地，所述应用软件，发送的校准音频流为按第一时间间隔采样的音频流。

可选地，加入模块，用于在音频输入通道中按第二时间间隔加入超声波脉冲；