[发明专利]一种直播方法、装置及电子设备

权利要求书

1.一种直播方法，其特征在于，包括以下步骤：

对主播客户端通过摄像头捕获的图像帧中的目标对象进行肢体特征识别，识别出肢体动作；

通过物理模型设置受控对象的形象，通过驱动模型基于肢体动作计算AR场景下受控对象的位置，并在图像帧中渲染所述受控对象形成视频画面；

将所述视频画面发给观众客户端；

所述方法还包括：

当嘴张开程度大于启动阈值时，基于嘴的位置渲染受控对象；

识别人脸朝向及嘴的闭合速度；

基于肢体动作计算AR场景下受控对象的位置的步骤包括：

基于人脸朝向设置所述受控对象运动的方向、及基于嘴的闭合速度设置所述受控对象运动的速度，基于运动的方向及速度计算受控对象的位置。

2.如权利要求1所述的直播方法，其特征在于，所述基于肢体动作计算AR场景下受控对象的位置的步骤包括：

根据受控对象位置、嘴的位置及张开程度计算所述受控对象是否落入嘴中。

3.如权利要求2所述的直播方法，其特征在于，所述根据受控对象位置、嘴的位置及张开程度计算所述受控对象是否落入嘴中的步骤之后，还包括以下任一：

根据所述受控对象是否落入嘴中调整游戏进度条的状态；

当所述受控对象未落入嘴中时，根据目标对象的位置控制所述受控对象退出；

当所述受控对象落入嘴中和/或击中目标对象时，根据所记录的该受控对象的属性，在视频画面中添加与所述属性对应的特效。

4.如权利要求3所述的直播方法，其特征在于，所述受控对象包括食物；

所述属性包括以下至少之一：味觉属性、物态属性、热量属性；

所述味觉属性包括：酸、甜、苦、辣、咸；

所述物态属性包括：固态、液态、气态；

所述特效包括：在目标对象上渲染表示味觉属性的表情、与受控对象接触的印迹、调整目标对象的胖瘦。

5.如权利要求1所述的直播方法，其特征在于，所述方法还包括：

基于人脸朝向及嘴的闭合速度设置所述受控对象运动的初始速度，结合受控对象运动的起点、及重力加速度计算所述受控对象的位置。

6.如权利要求5所述的直播方法，其特征在于，所述方法还包括：

在视频画面中渲染受控对象的关联对象，获取受控对象与关联对象的位置关系；

根据所述位置关系判断受控对象是否落入关联对象中。

7.如权利要求6所述的直播方法，其特征在于，所述根据所述位置关系判断受控对象是否落入关联对象中的步骤之后，还包括以下任一：

根据受控对象是否落入关联对象中调整游戏进度条的状态；

当受控对象未落入关联对象中时，获取受控对象与关联对象的位置关系，根据该位置关系控制受控对象退出和/或添加特效；

当受控对象落入关联对象中时，根据受控对象与关联对象的位置关系获取命中属性，根据所述命中属性控制受控对象退出和/或命中关联对象。

8.如权利要求1至7中任一项所述的直播方法，其特征在于，所述方法还包括：

当图像帧中的人脸数多于一个时，根据预设规则确定目标对象；

其中，所述预设规则包括以下至少之一：

以位置居中的人脸为目标对象；

以面积最大的人脸为目标对象；

以最早检测到的人脸为目标对象；

根据外部输入的指令确定目标对象；

以与用户身份信息匹配的人脸为目标对象。

9.如权利要求1至7中任一项所述的直播方法，其特征在于，所述基于肢体动作计算AR场景下受控对象的位置，在图像帧中渲染所述受控对象形成视频画面的步骤包括：

基于视频画面前一帧的肢体动作计算受控对象在下一帧的位置。