[发明专利]一种WebRTC中的直播流处理方法及推流客户端有效
申请号: | 201811385153.7 | 申请日: | 2018-11-20 |
公开(公告)号: | CN109327727B | 公开(公告)日: | 2020-11-27 |
发明(设计)人: | 林新建 | 申请(专利权)人: | 网宿科技股份有限公司 |
主分类号: | H04N21/435 | 分类号: | H04N21/435;H04N21/44;H04N21/4402;H04N21/8358;H04L29/06;G06F16/70 |
代理公司: | 北京华智则铭知识产权代理有限公司 11573 | 代理人: | 姜子朋 |
地址: | 201800 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 webrtc 中的 直播 处理 方法 客户端 | ||
1.一种WebRTC中的直播流处理方法,其特征在于,所述方法应用于推流客户端中,所述方法包括:
采集原始直播流,并将所述原始直播流加载至临时视频标签中,以通过所述临时视频标签静音播放所述原始直播流;其中,所述临时视频标签设置为不可见,以使得所述原始直播流不在页面前端显示画面和声音,所述原始直播流无法从外部观看到;
创建临时图片标签,并将预设水印图片加载至所述临时图片标签中;
创建临时绘制标签,并将所述临时视频标签中的每一视频帧以及所述临时图片标签中的所述预设水印图片绘制到所述临时绘制标签中;
获取所述临时绘制标签对应的画布视频流,并基于所述画布视频流的视频轨道和所述原始直播流的音频轨道,生成添加了水印的水印直播流,所述水印直播流用于通过WebRTC连接被发送至资源服务器。
2.根据权利要求1所述的方法,其特征在于,将预设水印图片加载至所述临时图片标签中包括:
将所述预设水印图片的加载地址关联至所述临时图片标签中,以使得所述临时图片标签按照所述加载地址加载所述预设水印图片。
3.根据权利要求1或2所述的方法,其特征在于,将预设水印图片加载至所述临时图片标签中时,所述方法还包括:
在所述临时图片标签中设置所述预设水印图片的展示尺寸以及所述预设水印图片在视频画面中所处的位置信息。
4.根据权利要求1所述的方法,其特征在于,将所述临时视频标签中的当前视频帧以及所述临时图片标签中的所述预设水印图片绘制到所述临时绘制标签中包括:
调用浏览器提供的页面工作对象,并通过所述页面工作对象创建多线程;
启动所述多线程,以通过所述多线程向预设脚本传递表征添加水印的指令;其中,所述预设脚本响应于所述表征添加水印的指令,执行完预设业务逻辑后,向所述多线程反馈通知信息;
所述多线程响应于所述通知信息,将所述临时视频标签中的当前视频帧以及所述临时图片标签中的所述预设水印图片绘制到所述临时绘制标签中。
5.根据权利要求1或4所述的方法,其特征在于,将所述临时视频标签中的当前视频帧以及所述临时图片标签中的所述预设水印图片绘制到所述临时绘制标签中包括:
调用所述临时绘制标签中用于返回绘图环境的预设指令,并向所述预设指令传递用于表征平面图像的参数,以获取所述临时绘制标签对应的平面图像渲染对象;
通过所述平面图像渲染对象依次从所述临时视频标签和所述临时图片标签中分别获取所述当前视频帧和所述预设水印图片,并将获取的所述当前视频帧和所述预设水印图片绘制到所述临时绘制标签中。
6.根据权利要求5所述的方法,其特征在于,通过所述平面图像渲染对象依次从所述临时视频标签和所述临时图片标签中分别获取所述当前视频帧和所述预设水印图片包括:
在所述平面图像渲染对象中标注所述临时视频标签、所述原始直播流中视频帧的尺寸信息以及所述原始直播流中视频帧的起始位置信息,以从所述临时视频标签中获取所述当前视频帧;
在所述平面图像渲染对象中标注所述临时图片标签、所述预设水印图片的尺寸信息以及所述预设水印图片的起始位置信息,以从所述临时图片标签中获取所述预设水印图片。
7.根据权利要求1所述的方法,其特征在于,基于所述画布视频流的视频轨道和所述原始直播流的音频轨道,生成添加了水印的水印直播流包括:
从所述原始直播流中提取音频轨道,并从所述画布视频流中提取视频轨道;
将所述音频轨道和所述视频轨道合并,以生成添加了水印的水印直播流。
8.根据权利要求1所述的方法,其特征在于,在生成添加了水印的水印直播流之后,所述方法还包括:
利用浏览器提供的用于维护WebRTC连接的接口创建连接对象,并将所述水印直播流加入所述连接对象中;
所述连接对象与资源服务器建立WebRTC连接,并通过所述WebRTC连接向所述资源服务器推送所述水印直播流的数据包。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网宿科技股份有限公司,未经网宿科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811385153.7/1.html,转载请声明来源钻瓜专利网。