[发明专利]获取蒙版帧数据的方法、计算机设备及可读存储介质有效

专利信息
申请号: 201910413128.3 申请日: 2019-05-17
公开(公告)号: CN111954053B 公开(公告)日: 2023-09-05
发明(设计)人: 时英选;张抗抗;刘若衡;高龙文 申请(专利权)人: 上海哔哩哔哩科技有限公司
主分类号: H04N21/431 分类号: H04N21/431;H04N21/4788;H04N21/8547;H04N21/435;H04N21/44;G06T7/11
代理公司: 北京英特普罗知识产权代理有限公司 11015 代理人: 林彦之
地址: 200433 上海市*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 获取 帧数 方法 计算机 设备 可读 存储 介质
【说明书】:

发明公开了获取蒙版帧数据的方法、计算机设备及可读存储介质,属于互联网技术领域。本发明采用图像分割算法识别视频中帧图像的主体区域,再根据主体区域生成蒙版帧数据,在播放视频时,可使弹幕信息显示于蒙版帧数据对应的区域以外的区域,达到避免视频中的主体区域在播放时被遮盖的目的,从而提升用户的观看效果。

技术领域

本发明涉及互联网技术领域,尤其涉及获取蒙版帧数据的方法、计算机设备及可读存储介质。

背景技术

弹幕(barrage、bullet或danmaku)属于中文流行词语,是在网络上观看视频时弹出的评论性字幕。弹幕顾名思义是指大量吐槽评论从屏幕飘过时效果看上去像是飞行射击游戏里的弹幕,故得名弹幕。用户在观看直播的过程中,会通过发送弹幕的方式来增加用户和用户之间,以及用户和主播之间的互动,当用户发送弹幕后,弹幕文字会以滚动的方式在直播画面上呈现,以便于被其它用户所查看,形成一种基于视频观看,围绕视频内容的新的网络社交形态。

然而,由于在弹幕过多的情况下,遮挡视频内容较多,影响观看效果。为了不影响对直播的观看,大多数用户通常选择屏蔽直播画面上的弹幕文字,但用户选择屏蔽弹幕方式,使得直播画面上无法呈现用于进行互动的弹幕,降低了直播间的互动性。

发明内容

针对目前弹幕过多影响观看效果的问题,现提供一种旨在不影响的用户观看效果的情况显示弹幕信息的获取蒙版帧数据的方法、计算机设备及可读存储介质。

一种获取蒙版帧数据的方法,包括下述步骤:

基于图像分割算法识别视频中至少一帧图像的主体区域;

根据所述主体区域生成蒙版帧数据。

优选的,基于图像分割算法识别视频中至少一帧图像的主体区域的步骤,包括:

采用语义分割模型识别视频中至少一帧图像的主体区域。

优选的,所述语义分割模型依次包括至少两个特征提取模块、至少一特征增强层和一分类层。

优选的,采用语义分割模型识别视频中至少一帧图像的主体区域的步骤,包括:

分别通过每一特征提取模块对所述视频的至少一帧图像进行特征图提取;

对每一所述特征提取模块输出的特征图进行逐级融合,所述至少一特征增强层将所有的特征提取模块最终输出的特征图进行融合生成综合特征图;

所述分类层根据所述综合特征图对应的像素预测语义分割结果,获取所述主体区域。

优选的,采用语义分割模型识别视频中至少一帧图像的主体区域的步骤,之前包括:

获取至少一第一样本图像,所述第一样本图像为包括人物和/或动物的对象图像,

获取至少一第二样本图像,所述第二样本图像为不包括人物和动物的背景图像;

提取所述对象图像中的对象区域;

将所述对象区域与所述背景图像合成生成训练样本集合;

采用训练样本集合对初始分割模型进行训练,获取语义分割模型。

优选的,所述分类层根据所述综合特征图对应的像素预测语义分割结果,获取所述主体区域的步骤之前的步骤,包括:

采用条件随机场模块对所述综合特征图中每一对象区域的像素点进行约束处理,获取经处理后的综合特征图。

优选的,基于图像分割算法识别视频中至少一帧图像的主体区域的步骤,包括:

采用实例分割模型识别视频中至少一帧图像的主体区域。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海哔哩哔哩科技有限公司,未经上海哔哩哔哩科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910413128.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top