[发明专利]一种直播换脸交互实现方法、存储介质、设备及系统在审
申请号: | 201811163244.6 | 申请日: | 2018-09-30 |
公开(公告)号: | CN110969673A | 公开(公告)日: | 2020-04-07 |
发明(设计)人: | 李亮 | 申请(专利权)人: | 武汉斗鱼网络科技有限公司 |
主分类号: | G06T11/00 | 分类号: | G06T11/00;G06K9/00;H04N21/475;H04N21/4788;H04N21/488 |
代理公司: | 武汉智权专利代理事务所(特殊普通合伙) 42225 | 代理人: | 张凯 |
地址: | 430000 湖北省武汉市东湖开*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 直播 交互 实现 方法 存储 介质 设备 系统 | ||
本发明公开了一种直播换脸交互实现方法、存储介质、设备及系统,涉及互联网直播领域,包括基于弹幕投票方式,对多个待选脸部进行投票;选取投票数最多的待选脸部作为目标脸部;基于脸部关键点检测算法,对目标脸部进行脸部关键点检测,并对检测出的关键点进行三角剖分,确定目标脸部的三角形区域;对主播脸部进行脸部关键点检测,确定主播脸部的三角形区域;通过三角形的仿射变换,将目标脸部三角形区域的像素覆盖到主播脸部三角形区域。本发明能够有效增加主播和观众间的互动感。
技术领域
本发明涉及互联网直播领域,具体涉及一种直播换脸交互实现方法、存储介质、设备及系统。
背景技术
随着移动互联网的飞速发展,直播行业也呈现出蓬勃发展之势,越来越多的年轻人喜欢通过观看直播的方式来打发业余时间。
主播在直播的过程中,为了提升自身直播内容的趣味性,增加直播间的人气值,主播一般会与观众进行互动,但在现有的交互方式中,仅仅限于主播通过语言或肢体动作、观众发送弹幕的方式,主播和观众间进行交互,交互方式较为单一。
发明内容
针对现有技术中存在的缺陷,本发明的目的在于提供一种直播换脸交互实现方法,能够有效增加主播和观众间的互动感。
为达到以上目的,本发明采取的技术方案是,包括:
基于弹幕投票方式,对多个待选脸部进行投票;
选取投票数最多的待选脸部作为目标脸部;
基于脸部关键点检测算法,对目标脸部进行脸部关键点检测,并对检测出的关键点进行三角剖分,确定目标脸部的三角形区域;
对主播脸部进行脸部关键点检测,确定主播脸部的三角形区域;
通过三角形的仿射变换,将目标脸部三角形区域的像素覆盖到主播脸部三角形区域。
在上述技术方案的基础上,所述进行脸部关键点检测中,检测的关键点包括额头、眉毛、眼睛、鼻子、嘴巴和脸颊。
在上述技术方案的基础上,所述基于弹幕投票方式,对多个待选脸部进行投票,具体步骤为:
S101:选取设定数目的脸部图像作为待选脸部,且每个待选脸部的样式均不相同;
S102:按照选取的先后顺序,依次对待选脸部进行数字编号;
S103:观众在待选脸部中进行选择,并以弹幕形式发送所选待选脸部对应的数字编号;
S104:弹幕服务器对观众发送的数字编号进行统计,将发送次数最多的数字编号对应的待选脸部作为目标脸部。
在上述技术方案的基础上,所述待选脸部包括动物脸部类别、明星人物脸部类别和卡通人物脸部类别,且每个类别中包括多个样式。
在上述技术方案的基础上,当将目标脸部三角形区域的像素覆盖到主播脸部三角形区域之后,用户以弹幕形式发送分数,对直播画面中主播的图像进行打分,弹幕服务器对观众发送的分数进行统计,并取平均分数,若平均分数少于预设平均分,则按照由高至低顺序,选取发送次数排名第二的数字编号对应的待选脸部作为目标脸部。
在上述技术方案的基础上,当将目标脸部三角形区域的像素覆盖到主播脸部三角形区域之后,还包括以下步骤:
S501:弹幕服务器对实时统计单位时间内的弹幕数量,若单位时间内的弹幕数量大于预设弹幕数,则转到S502,若单位时间内的弹幕数量不大于预设弹幕数,则转到S503;
S502:目标脸部三角形区域的像素继续覆盖于主播脸部三角形区域之上;
S503:撤销主播脸部三角形区域上目标脸部三角形区域像素的覆盖。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉斗鱼网络科技有限公司,未经武汉斗鱼网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811163244.6/2.html,转载请声明来源钻瓜专利网。