[发明专利]一种指定多元素的视频连麦方法、装置、设备及存储介质

说明书

本发明提出一种指定多元素的视频连麦方法、装置、设备及存储介质，所述方法包括如下步骤：选定直播场景中的任意元素；创建连麦视频渲染目标；在当前直播视频流的单个元素纹理绘制及图像处理完成的位置增设第一回调函数，在所有元素纹理都处理完成的位置增设第二回调函数；当第一回调函数触发时，判断所述单个元素是否需要共享到连麦视频中；若需要，则在连麦视频渲染目标绘制所述选定元素的纹理；当所有的选定元素都完成绘制，将所述连麦视频渲染目标中的最终纹理的图像数据发送至连麦对象。本发明的方法可以自由指定本地元素共享给连麦对象，元素的图像处理等操作无需重复进行，可实现高效的多元素视频连麦。本发明属于网络直播技术领域。

技术领域

本发明提出一种指定多元素的视频连麦方法、装置、设备及存储介质，属于网络直播技术领域。

背景技术

随着网络直播行业兴起，视频直播的内容更加丰富和多元化，视频连麦功能也受到很多用户欢迎，主播在直播的过程中可以与其他主播视频连麦，共享直播推流图像。

在直播行业中，视频主播可以选择将摄像头、文字等多种直播元素混合在一起推送给收看的观众，但在与其他主播视频连麦时双方只会共享对方的摄像头，共享内容较单一。因此在现有直播技术中，视频连麦时将直播推流图像共享给对方主播存在元素不可选不灵活的问题，而且在使用Direct3D(以下简称D3D)渲染连麦视频的过程中，需要将直播的图像渲染流程完全重复一遍得到指定元素的图像，性能消耗过多。

发明内容

本发明提出一种指定多元素视频连麦的方法、装置、设备及存储介质，以解决视频连麦过程中元素不可选不灵活的问题。

本发明实施例的第一方面，提供了一种指定多元素的视频连麦方法，所述包括：

S1、选定直播场景中的任意元素，记录所选元素ID，存放至一个ID链表；

S2、根据连麦视频指定的宽高，使用当前直播视频的D3D设备对象创建一个连麦视频渲染目标；

S3、在当前直播视频流的单个元素纹理绘制及图像处理完成的位置增设第一回调函数；在所述直播视频流一个场景内所有元素纹理都处理完成的位置增设第二回调函数；

S4、当所述第一回调函数触发时，根据所述ID链表判断所述单个元素是否需要共享到连麦视频中，若需要，则将所述单个元素作为选定元素并进入步骤S5；

S5、新建一个局部渲染目标对象指针，用所述对象指针缓存所述直播视频的渲染目标地址；

S6、调用D3D设备的SetRenderTarget函数，将所述连麦视频渲染目标设置到当前D3D设备对象中，在所述连麦视频渲染目标中绘制所述选定元素的纹理；

S7、调用D3D设备的SetRenderTargets函数，将所述直播视频的渲染目标重新设置到当前D3D设备对象中；

S8、针对每个直播元素在所述第一回调函数中执行步骤S4至S7；

S9、当所有的选定元素完成绘制、触发所述第二回调函数时，将所述连麦视频渲染目标中的最终纹理的图像数据发送至连麦对象，实现指定元素的视频连麦。

在上述视频连麦方法中，步骤S1所述任意元素包括摄像头、桌面截屏、文字、图片。

在上述视频连麦方法中，所述步骤S3中，所述直播视频流一个场景内所有元素纹理都处理完成的位置即为调用D3D设备的EndScene函数来结束一帧的绘制的位置。

在上述视频连麦方法中，所述步骤S4中，根据所述ID链表判断所述单个元素是否需要共享到连麦视频中的具体方式为：识别所述单个元素的ID，若所述单个元素ID在所述ID链表中，则所述单个元素需要共享到连麦视频中。

在上述视频连麦方法中，步骤S6中所述选定元素的纹理通过所述第一回调函数获取。