[发明专利]一种多媒体音视频数据同步计算方法在审

专利信息
申请号: 201810742359.4 申请日: 2018-07-09
公开(公告)号: CN108881992A 公开(公告)日: 2018-11-23
发明(设计)人: 单春芳;章晓晓;赵建华;徐晓峰;李夏宾 申请(专利权)人: 深圳市潮流网络技术有限公司;潮流网络有限公司
主分类号: H04N21/43 分类号: H04N21/43;H04N5/262
代理公司: 暂无信息 代理人: 暂无信息
地址: 518000 广东省深圳市南*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 测试电脑 测试通讯 音视频同步 多媒体音视频 测试文件 视频素材 数据同步 音频素材 波形图 可视化 音视频 视频 音频视频同步 播放音视频 音视频数据 声音转化 同步测试 同一时刻 摄像头 播放 截取 时长 合成 测试 发送 制作 优化
【说明书】:

发明披露了一种多媒体音视频数据同步计算方法,包括:步骤a:分别制作用于音频视频同步测试的音频素材和视频素材,将音频素材和视频素材合成生成音视频同步测试文件;步骤b:第一测试电脑和第二测试电脑的建立测试通讯连接,将音视频同步测试文件发送至第二测试电脑,第一测试电脑播放音视频同步测试文件,同时第一测试电脑在测试通讯软件中开启摄像头,用于获取自身播放的音视频数据;步骤c:第二测试电脑在测试通讯软件中查看视频和听取声音,把声音转化为可视化波形图,截取同一时刻的可视化波形图和测试通讯软件中播放的视频,计算音视频时间差值。通过本发明方法可以计算出音视频时长客观真实情况,为优化音视频同步提供准确可靠的依据。

技术领域

本发明属于多媒体领域,尤其涉及通讯软件中的多媒体音视频数据同步计算技术。

背景技术

网络通信多样化的今天,音视频同步是最直观用户体验,由于不同的人群对听到的音频对应到实际播放的视频中感受到的不同步时间会存在差异,对听觉和视觉较灵敏的人群会感受到不同步的时间比较大,那感受产品的音视频同步的质量也比较差,而对听觉和视觉不灵敏的人群,体验也会不一样。

现在技术中,有些基于RTCP发送者报文的RTP时间戳和NTP时间戳来实现音视频同步,并不能反映用户实际听到的音频和看到的视频存在多大的不同步,有些需借助特定辅助设备来计算音视频同步时间差,存在安全风险。

发明内容

本发明目的在于提供一种多媒体音视频数据同步计算方法,通过自制音视频同步测试素材、测试电脑端对实际播放的音视频数据的采集,以实现声音和视频的同步时长计算。

为了实现本发明目的,公开了一种多媒体音视频数据同步计算方法,具体包括以下步骤:步骤a:分别制作用于音频视频同步测试的音频素材和视频素材,同时,将音频素材和视频素材合成到同一个文件中,生成音视频同步测试文件;步骤b:第一测试电脑和第二测试电脑的建立测试通讯连接,将音视频同步测试文件发送至第二测试电脑,第一测试电脑播放音视频同步测试文件,同时第一测试电脑在测试通讯软件中开启摄像头,用于获取自身播放的音视频数据;步骤c:第二测试电脑在测试通讯软件中查看视频和听取声音,把声音转化为可视化波形图,截取同一时刻的可视化波形图和测试通讯软件中播放的视频,计算音视频时间差值。

优选的,上述视频素材按帧率F进行分解,每秒第一张图片标记为视频素材V,并依序对视频素材V进行数字标识,视频素材V带有对应时间下的音频素材。

优选的,上述音频素材制作过程为:通过录音机录制数字声音,每个数字保存为一个声音文件,同时,对所述声音文件进行波形处理,去除噪音、拖音用以保留发声清晰的数字音的波形图。

优选的,用音视频合成工具合成音视频同步测试文件,在视频轨道中,每秒依序均匀放置F张所述视频素材;在音频轨道中,将数字标识的视频素材V放置对应的音频素材。且音频轨道中每一个音频素材的时长和视频轨道中的视频素材V的时长需一致。

优选的,上述步骤b中,第一测试电脑接收到音视频同步测试文件后,将系统的立体声混音作为默认声卡,并在测试通讯软件中将立体声混音作为声音设备。

优选的,上述步骤c中,第二测试电脑通过cool edit pro工具将第二测试电脑听到的声音转化为可视化的波形图。

优选的,上述步骤c中,查看截图中视频图像的时间信息:00:S1:N,计算Video_time = (N -1)*1000/F,将截图中cool edit pro显示的时间记为T1,将最近有声音的波形,听取的数字记为S2,波形中间点的时间记为T2,计算音频时长为Audio_time =(T1-T2)ms。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市潮流网络技术有限公司;潮流网络有限公司,未经深圳市潮流网络技术有限公司;潮流网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810742359.4/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top