[发明专利]模型的训练及其直播处理的方法、装置、设备和存储介质有效

专利信息
申请号: 202010002154.X 申请日: 2020-01-02
公开(公告)号: CN111222450B 公开(公告)日: 2023-06-20
发明(设计)人: 罗祥辉 申请(专利权)人: 广州虎牙科技有限公司
主分类号: H04N21/234 分类号: H04N21/234;H04N21/258;G06V20/40;G06V10/764;G06V10/774
代理公司: 北京品源专利代理有限公司 11332 代理人: 孟金喆
地址: 511400 广东省广州市番禺*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 模型 训练 及其 直播 处理 方法 装置 设备 存储 介质
【权利要求书】:

1.一种直播处理的方法,其特征在于,包括:

接收主播客户端上传的直播视频数据;

从所述直播视频数据中提取原始图像数据;

将所述原始图像数据输入敏感场景识别模型中,以从所述直播视频数据中识别包括指定的旗帜、徽章、标志性建筑中的至少一种对象的敏感场景,所述敏感场景识别模型包括主杆单元、第一稠密叠加单元、第二稠密叠加单元、第三稠密叠加单元、第四稠密叠加单元,所述主杆单元对所述原始图像进行降维处理,以输出第一图像向量,通过各稠密叠加单元不断对所述第一图像向量进行降维处理,每个稠密叠加单元包括不同数量的稠密叠加模块;

若确定所述直播视频数据中具有敏感场景时,则对所述直播视频数据进行业务处理。

2.根据权利要求1所述的方法,其特征在于,所述从所述直播视频数据中提取原始图像数据,包括:

确定目标时间;

每间隔所述目标时间,从所述直播视频数据中提取视频帧,以作为原始图像数据。

3.根据权利要求1所述的方法,其特征在于,所述将所述原始图像数据输入敏感场景识别模型中,以从所述直播视频数据中识别包括指定的旗帜、徽章、标志性建筑中的至少一种数据的敏感场景,包括:

将所述原始图像数据输入主杆单元中进行降维处理,以输出第一图像向量;

将所述第一图像向量输入第一稠密叠加单元中提取第二图像向量;

将所述第二图像向量输入第二稠密叠加单元中提取第三图像向量;

将所述第三图像向量输入第三稠密叠加单元中提取第四图像向量;

将所述第四图像向量输入第四稠密叠加单元中提取第五图像向量;

基于所述第四图像向量与所述第五图像向量识别所述图像数据中具有的场景类别;

若所述场景类别为包括指定的旗帜、徽章、标志性建筑中的至少一种对象的敏感场景,则确定所述直播视频数据具有敏感场景。

4.根据权利要求3所述的方法,其特征在于,所述基于所述第四图像向量与所述第五图像向量识别所述图像数据中具有的场景类别,包括:

计算所述第四图像向量的第一残差向量;

对所述第一残差向量进行池化操作,获得第一特征向量;

计算所述第五图像向量的第二残差向量;

对所述第二残差向量进行池化操作,获得第二特征向量;

结合所述第一特征向量与所述第二特征向量,获得目标特征向量;

对所述目标特征向量进行全连接操作,获得场景类别,所述场景类别关联概率;

基于所述概率确定所述图像数据中具有的场景类别。

5.根据权利要求1-4任一项所述的方法,其特征在于,所述对所述直播视频数据进行业务处理,包括:

确定所述直播视频数据中、所述原始图像数据中的目标区域,所述目标区域包括指定的旗帜、徽章、标志性建筑中的至少一种对象;

对所述目标区域进行模糊处理,以获得目标视频数据;

在指定的直播间发布所述目标视频数据。

6.根据权利要求1-4任一项所述的方法,其特征在于,所述对所述直播视频数据进行业务处理,包括:

确定在所述主播客户端登录的主播账号;

对所述主播账号进行封禁处理。

7.一种敏感场景识别模型的训练方法,其特征在于,包括:

获取标记有场景类别的训练图像数据,所述场景类别至少具有包括指定的旗帜、徽章、标志性建筑中的至少一种的敏感场景类别;

针对直播对所述训练图像数据进行扩充;

将扩充后的训练图像数据输入至预设的敏感场景识别模型中,以预测所述训练图像数据的场景类别;

根据标记的场景类别与预测的场景类别对所述敏感场景识别模型进行更新;

其中,所述敏感场景识别模型应用于如权利要求1-6任一项所述的直播处理的方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州虎牙科技有限公司,未经广州虎牙科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010002154.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top