[发明专利]直播数据的处理方法、装置及电子设备

说明书

本发明提供了一种直播数据的处理方法、装置及电子设备，接收第一终端设备发送的直播数据；将直播数据中的初始图像输入至预先训练的图像增强模型，通过图像增强模型对初始图像进行特征提取处理，得到初始图像的浅层图像特征及深层图像特征；基于浅层图像特征及深层图像特征，生成初始图像对应的增强图像，进而确定处理后的直播数据，将处理后的直播数据发送至目标终端设备。该方法中，通过图像增强模型提取直播数据中初始图像的浅层图像特征及深层图像特征，进而基于这些图像特征生成分辨率与初始图像相匹配的增强图像，在不增加图像的分辨率的同时，提升了图像质量，使用户获得了更好的直播观看体验。

技术领域

本发明涉及直播技术领域，具体而言，涉及一种直播数据的处理方法、装置及电子设备。

背景技术

在用户观看直播的过程中，通常需要直播服务器将从主播端产生的视频数据需要传送至直播服务器，再由直播服务器发送至用户的终端设备。考虑到视频传输的带宽及直播画面传送的即时性，需要降低视频数据在传输过程中的码率，因此在传输前通常会对视频数据进行编码及压缩处理。终端设备在接收到编码压缩处理后的视频数据后，对其进行解码处理，得到用户可以观看的视频数据。然而，经过编码处理视频数据通常会受到一定程度的损伤，导致视频画面质量较差。

相关技术中，通常采用基于视频超分辨率、视频插帧等技术去提升源视频帧的分辨率或视频帧数量，进而提升画质，然而该方式对算力要求较高，提升画质的效率较低，且容易降低视频数据的传送效率。此外，还可以通过改造对视频进行压缩处理的编码器实现画质提升，然而编码器的各个阶段互相分离，较难对算法进行迭代，同时硬件解码仅支持标准编码算法的解码，优化成本较高且泛化性差。

发明内容

有鉴于此，本发明的目的在于提供一种直播数据的处理方法、装置及电子设备，以在不增加图像的分辨率的同时，提升图像质量，以使用户得到更好的直播观看体验。

第一方面，本发明实施例提供了一种直播数据的处理方法，该方法包括：接收第一终端设备发送的直播数据；直播数据包括多帧初始图像；将初始图像输入至预先训练的图像增强模型，通过图像增强模型对初始图像进行特征提取处理，得到初始图像的浅层图像特征及深层图像特征；基于浅层图像特征及深层图像特征，生成初始图像对应的增强图像；增强图像的分辨率与初始图像的分辨率相匹配；基于增强图像，确定处理后的直播数据，将处理后的直播数据发送至目标终端设备。

第二方面，本发明实施例提供了一种直播数据的处理装置，该装置包括：直播数据接收模块，用于接收第一终端设备发送的直播数据；直播数据包括多帧初始图像；图像增强模块，用于将初始图像输入至预先训练的图像增强模型，通过图像增强模型对初始图像进行特征提取处理，得到初始图像的浅层图像特征及深层图像特征；基于浅层图像特征及深层图像特征，生成初始图像对应的增强图像；增强图像的分辨率与初始图像的分辨率相匹配；直播数据发送模块，用于基于增强图像，确定处理后的直播数据，将处理后的直播数据发送至目标终端设备。

第三方面，本发明实施例提供了一种电子设备，包括处理器和存储器，存储器存储有能够被处理器执行的机器可执行指令，处理器执行机器可执行指令以实现上述的直播数据的处理方法。

第四方面，本发明实施例提供了一种机器可读存储介质，该机器可读存储介质存储有机器可执行指令，机器可执行指令在被处理器调用和执行时，机器可执行指令促使处理器实现上述的直播数据的处理方法。

本发明实施例带来了以下有益效果：