[发明专利]虚拟形象的线上多媒体互动系统及方法有效

专利信息
申请号: 201810031218.1 申请日: 2018-01-12
公开(公告)号: CN108200446B 公开(公告)日: 2021-04-30
发明(设计)人: 刘岩;刘勇 申请(专利权)人: 北京蜜枝科技有限公司
主分类号: H04N21/2187 分类号: H04N21/2187;H04N21/233;H04N21/234;H04N21/439;H04N21/44;H04N21/488;H04N21/643
代理公司: 北京合智同创知识产权代理有限公司 11545 代理人: 李杰
地址: 100044 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 虚拟 形象 线上 多媒体 互动 系统 方法
【权利要求书】:

1.一种虚拟形象的线上多媒体互动系统,其特征在于,包括:

虚拟形象导入模块,用于导入虚拟形象的虚拟模型;

数据提取模块,用于实时提取实际形象的实际视频数据与实际音频数据;

数据驱动模块,用于将所述实际视频数据与所述实际音频数据实时映射至所述虚拟模型,生成所述虚拟形象的虚拟影音动画;以及

虚拟形象输出模块,用于将所述虚拟影音动画实时地输出至流媒体服务器所提供的线上互动服务平台,而以所述虚拟形象接入所述线上互动服务平台进行多媒体互动直播;

数据驱动模块包括视频数据处理单元,所述视频数据处理单元用于从所述实际视频数据中分解出静态图像以及动态图像,将所分解出的所述静态图像与所述动态图像叠加到三维引擎渲染的虚拟图像上,形成虚拟影音画面,所述静态图像中包含有字幕图片、静态特效图片。

2.根据权利要求1所述的虚拟形象的线上多媒体互动系统,其特征在于,所述数据提取模块还包括:

视频提取单元,其用于根据预设的实时图像提取速率提取所述实际形象的所述实际视频数据;以及

音频提取单元,其用于提取所述实际形象的所述实际音频数据。

3.根据权利要求2所述的虚拟形象的线上多媒体互动系统,其特征在于,所述实时图像提取速率是根据网络带宽、计算机的处理性能以及网络传输协议而设定。

4.根据权利要求2所述的虚拟形象的线上多媒体互动系统,其特征在于,所述虚拟形象的虚拟影音动画由所述虚拟形象的虚拟影像数据及虚拟声音数据所构成,且所述数据驱动模块还包括:

视频数据处理单元,其用于从所述实际视频数据分解出动作数据以生成动作驱动数据据以驱动所述虚拟模型执行动作,从而生成所述虚拟形象的所述虚拟影像数据;以及

音频数据处理单元,其用于针对所述实际音频数据分别进行至少包括音频降噪、音频静音检测、以及音频回声消除的处理,从而生成所述虚拟形象的所述虚拟声音数据。

5.根据权利要求4所述的虚拟形象的线上多媒体互动系统,其特征在于,所述虚拟形象输出模块还包括:

影像数据编码单元,其用于针对所述虚拟影像数据进行编码压缩处理,以生成视频压缩数据;

声音数据编码单元,其用于针对所述虚拟声音数据进行编码压缩处理,以生成音频压缩数据;

数据封装单元,其用于依据所述流媒体服务器所设定的消息传输协议对所述视频压缩数据与所述音频压缩数据进行封装,以生成数据封包;以及

数据传输单元,其用于基于所述消息传输协议将所述数据封包传输至所述流媒体服务器所提供的线上互动服务平台。

6.根据权利要求5所述的虚拟形象的线上多媒体互动系统,其特征在于,所述音频数据处理单元所执行的所述音频静音检测操作包括检测所述实际音频数据中具有静音标记的静音音频数据,以令所述声音数据编码单元针对所述静音音频数据不执行所述编码压缩处理。

7.根据权利要求1所述的虚拟形象的线上多媒体互动系统,其特征在于,所述系统还包括信息互动处理模块,其用于提取所述线上互动服务平台中的文字信息,并针对所提取的所述文字信息提供输入反馈信息,且将所述反馈信息输出至所述线上互动服务平台,以提供线上的文字信息互动操作。

8.根据权利要求7所述的虚拟形象的线上多媒体互动系统,其特征在于,所述信息互动处理模块采用网页信息爬取方式以及网络抓包方式中的至少一者提取所述线上互动服务平台中的所述文字信息。

9.根据权利要求1所述的虚拟形象的线上多媒体互动系统,其特征在于,所述系统应用于电子设备中,且所述电子设备中还安装有与所述线上互动服务平台通讯连接的多媒体直播软件,所述虚拟形象输出模块用于将所述虚拟影音动画接入所述多媒体直播软件,以供所述多媒体直播软件将所述虚拟影音动画实时地输出至所述线上互动服务平台,而以所述虚拟形象接入所述线上互动服务平台进行多媒体互动直播。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京蜜枝科技有限公司,未经北京蜜枝科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810031218.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top