[发明专利]一种直播换脸交互实现方法、存储介质、设备及系统

权利要求书

1.一种直播换脸交互实现方法，其特征在于，包括以下步骤：

基于弹幕投票方式，对多个待选脸部进行投票；

选取投票数最多的待选脸部作为目标脸部；

基于脸部关键点检测算法，对目标脸部进行脸部关键点检测，并对检测出的关键点进行三角剖分，确定目标脸部的三角形区域；

对主播脸部进行脸部关键点检测，确定主播脸部的三角形区域；

通过三角形的仿射变换，将目标脸部三角形区域的像素覆盖到主播脸部三角形区域。

2.如权利要求1所述的一种直播换脸交互实现方法，其特征在于：所述进行脸部关键点检测中，检测的关键点包括额头、眉毛、眼睛、鼻子、嘴巴和脸颊。

3.如权利要求1所述的一种直播换脸交互实现方法，其特征在于：所述基于弹幕投票方式，对多个待选脸部进行投票，具体步骤为：

S101：选取设定数目的脸部图像作为待选脸部，且每个待选脸部的样式均不相同；

S102：按照选取的先后顺序，依次对待选脸部进行数字编号；

S103：观众在待选脸部中进行选择，并以弹幕形式发送所选待选脸部对应的数字编号；

S104：弹幕服务器对观众发送的数字编号进行统计，将发送次数最多的数字编号对应的待选脸部作为目标脸部。

4.如权利要求3所述的一种直播换脸交互实现方法，其特征在于：所述待选脸部包括动物脸部类别、明星人物脸部类别和卡通人物脸部类别，且每个类别中包括多个样式。

5.如权利要求3所述的一种直播换脸交互实现方法，其特征在于：当将目标脸部三角形区域的像素覆盖到主播脸部三角形区域之后，用户以弹幕形式发送分数，对直播画面中主播的图像进行打分，弹幕服务器对观众发送的分数进行统计，并取平均分数，若平均分数少于预设平均分，则按照由高至低顺序，选取发送次数排名第二的数字编号对应的待选脸部作为目标脸部。

6.如权利要求1所述的一种直播换脸交互实现方法，其特征在于：当将目标脸部三角形区域的像素覆盖到主播脸部三角形区域之后，还包括以下步骤：

S501：弹幕服务器对实时统计单位时间内的弹幕数量，若单位时间内的弹幕数量大于预设弹幕数，则转到S502，若单位时间内的弹幕数量不大于预设弹幕数，则转到S503；

S502：目标脸部三角形区域的像素继续覆盖于主播脸部三角形区域之上；

S503：撤销主播脸部三角形区域上目标脸部三角形区域像素的覆盖。

7.如权利要求1所述的一种直播换脸交互实现方法，其特征在于：当将目标脸部三角形区域的像素覆盖到主播脸部三角形区域之后，对主播脸部三角形区域的边界进行融合处理，所述融合处理的具体步骤为：更改主播脸部三角形区域边界附近新覆盖的目标脸部三角形区域像素的透明度，且离主播脸部三角形区域边界越近，像素的透明度越高。

8.一种存储介质，该存储介质上存储有计算机程序，其特征在于：所述计算机程序被处理器执行时实现以下步骤：

基于弹幕投票方式，对多个待选脸部进行投票；

选取投票数最多的待选脸部作为目标脸部；

基于脸部关键点检测算法，对目标脸部进行脸部关键点检测，并对检测出的关键点进行三角剖分，确定目标脸部的三角形区域；

对主播脸部进行脸部关键点检测，确定主播脸部的三角形区域；

通过三角形的仿射变换，将目标脸部三角形区域的像素覆盖到主播脸部三角形区域。