[发明专利]虚拟形象的线上多媒体互动系统及方法

说明书

本申请实施例提供了一种虚拟形象的线上多媒体互动系统及方法，包括通过虚拟形象导入模块导入虚拟形象的虚拟模型；通过数据提取模块以实时提取实际形象的实际视频数据与实际音频数据，并利用数据驱动模块将所述实际视频数据与实际音频数据映射至所述虚拟模型，生成所述虚拟形象的虚拟影音动画，而后在通过虚拟形象输出模块将所述虚拟影音动画实时地输出至流媒体服务器所提供的线上互动服务平台，而以虚拟形象接入所述线上互动服务平台进行多媒体互动直播，借此提高多媒体互动直播的趣味性。

技术领域

本申请实施例涉及虚拟动画制作技术及多媒体直播技术，尤其涉及虚拟形象的线上多媒体互动系统及方法。

背景技术

网络直播技术是一种服务端将主播用户的直播视频数据广播至多个观众用户进行观看的互联网技术，同时还可提供观众用户与主播用户进行互动。

然而，在现有技术中，网络直播通常是以主播的实际形象予以展示，若能通过技术手段将虚拟形象接入互联网线上互动平台，而以虚拟形象代替实际形象参与到线上直播互动中，将可极大地提高网络直播的趣味性。

发明内容

有鉴于此，本发明实施例的主要目的在于提供一种虚拟形象的线上多媒体互动系统及方法，可实现以虚拟行形象代替实际形象接入互联网线上互动平台进行线上的互动直播，以增加线上互动直播的趣味性。

本申请实施例提供了一种虚拟形象的线上多媒体互动系统，其特征在于，包括：虚拟形象导入模块，用于导入虚拟形象的虚拟模型；数据提取模块，用于实时提取实际形象的实际视频数据与实际音频数据；数据驱动模块，用于将所述实际视频数据与所述实际音频数据实时映射至所述虚拟模型，生成所述虚拟形象的虚拟影音动画；以及虚拟形象输出模块，用于将所述虚拟影音动画实时地输出至流媒体服务器所提供的线上互动服务平台，而以所述虚拟形象接入所述线上互动服务平台进行多媒体互动直播。

可选地，在本申请的任一实施例中，所述数据提取模块还包括：视频提取单元，其用于根据预设的实时图像提取速率提取所述实际形象的所述实际视频数据；以及音频提取单元，其用于提取所述实际形象的所述实际音频数据。

可选地，在本申请的任一实施例中，所述实时图像提取速率是根据网络带宽、计算机的处理性能以及网络传输协议而设定。

可选地，在本申请的任一实施例中，所述虚拟形象的虚拟影音动画由所述虚拟形象的虚拟影像数据及虚拟声音数据所构成，且所述数据驱动模块还包括：

可选地，在本申请的任一实施例中，视频数据处理单元，其用于从所述实际视频数据分解出动作数据以生成动作驱动数据据以驱动所述虚拟模型执行动作，从而生成所述虚拟形象的所述虚拟影像数据；以及音频数据处理单元，其用于针对所述实时音频数据分别进行至少包括音频降噪、音频静音检测、以及音频回声消除的处理，从而生成所述虚拟形象的所述虚拟声音数据。

可选地，在本申请的任一实施例中，所述虚拟形象输出模块还包括：影像数据编码单元，其用于针对所述虚拟影像数据进行编码压缩处理，以生成视频压缩数据；声音数据编码单元，其用于针对所述虚拟声音数据进行编码压缩处理，以生成音频压缩数据；数据封装单元，其用于依据所述流媒体服务器所设定的消息传输协议对所述视频压缩数据与所述音频压缩数据进行封装，以生成数据封包；以及数据传输单元，其用于基于所述消息传输协议将所述数据封包传输至所述流媒体服务器所提供的线上互动服务平台。

可选地，在本申请的任一实施例中，所述音频数据处理单元所执行的所述音频静音检测操作包括检测所述实时音频数据中具有静音标记的静音音频数据，以令所述声音数据编码单元针对所述静音音频数据不执行所述编码压缩处理。

可选地，在本申请的任一实施例中，所述系统还包括信息互动处理模块，其用于提取所述线上互动服务平台中的文字信息，并针对所提取的所述文字信息提供输入反馈信息，且将所述反馈信息输出至所述线上互动服务平台，以提供线上的文字信息互动操作。