[发明专利]直播方法、装置、终端及存储介质有效
| 申请号: | 202011592216.3 | 申请日: | 2020-12-29 |
| 公开(公告)号: | CN112752149B | 公开(公告)日: | 2023-06-06 |
| 发明(设计)人: | 付敏 | 申请(专利权)人: | 广州繁星互娱信息科技有限公司 |
| 主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/439;H04L65/60;H04N21/4788;G06V40/10 |
| 代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 郭翱杰 |
| 地址: | 510032 广东省广州市黄埔区广新*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 直播 方法 装置 终端 存储 介质 | ||
1.一种直播方法,其特征在于,所述方法包括:
获取第一图像流数据;
在识别出所述第一图像流数据中人物的身体姿态为预设身体姿态时,基于所述预设身体姿态确定虚拟乐器;
采集所述第一图像流数据中所述人物在第i个帧段的手势变动信息,所述i为正整数;通过手势预测模型对所述第一图像流数据中所述人物在第i个帧段的手势变动信息进行处理,以预测所述第一图像流数据中所述人物在第i+1个帧段内的手势变动信息;基于所述第一图像流数据中所述人物在第i+1个帧段内的手势变动信息,和所述虚拟乐器对应的音频流数据,确定所述虚拟乐器对应的第二图像流数据,所述第二图像流数据包括所述虚拟乐器中控制部位的控制状态变化情况;
将所述第二图像流数据发送至推流服务器。
2.根据权利要求1所述的方法,其特征在于,所述预设身体姿态包括预设手势,所述基于所述预设身体姿态确定虚拟乐器,包括:
在第一对应关系中查找所述预设手势对应的虚拟乐器,所述第一对应关系包括不同手势与不同虚拟乐器之间的对应关系。
3.根据权利要求2所述的方法,其特征在于,所述预设身体姿态包括预设手势和预设身体姿势,所述基于所述预设身体姿态确定虚拟乐器,包括:
在第二对应关系中查找与所述预设手势、所述预设身体姿态均对应的虚拟乐器,所述第二对应关系包括不同手势、不同身体姿势与不同虚拟乐器之间的对应关系。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述方法还包括:
获取所述虚拟乐器对应的音频流数据;
获取所述音频流数据对应的手势集合;
将所述第一图像流数据中所述人物的手势变动信息,与所述音频流数据对应的手势集合进行比对,得到演奏得分。
5.根据权利要求4所述的方法,其特征在于,所述获取所述音频流数据对应的手势集合之后,还包括:
将所述音频流数据对应的手势集合的图像流数据发送至所述推流服务器。
6.根据权利要求1至3任一项所述的方法,其特征在于,所述方法还包括:
获取所述虚拟乐器对应的第一音频;
基于所述虚拟乐器中控制部位的控制状态变化情况获取第二音频;
将所述第一音频与所述第二音频进行比对,得到演奏得分。
7.一种直播方法,其特征在于,所述方法包括:
显示直播画面;
在识别出所述直播画面中人物的身体姿态为预设身体姿态时,基于所述预设身体姿态在所述直播画面中显示虚拟乐器;
基于所述直播画面中所述人物的手势变动信息,控制所述虚拟乐器中控制部位的控制状态变化,所述虚拟乐器中控制部位的控制状态变化是采集第一图像流数据中所述人物在第i个帧段的手势变动信息,所述i为正整数;通过手势预测模型对所述第一图像流数据中所述人物在第i个帧段的手势变动信息进行处理,以预测所述第一图像流数据中所述人物在第i+1个帧段内的手势变动信息;基于所述第一图像流数据中所述人物在第i+1个帧段内的手势变动信息,和所述虚拟乐器对应的音频流数据确定的;
播放音频流。
8.根据权利要求7所述的方法,其特征在于,所述在所述直播画面中显示虚拟乐器,包括:
确定用于弹奏所述虚拟乐器的人体部位;
根据所述预设身体姿态确定所述虚拟乐器的尺寸;
按照所述虚拟乐器的尺寸,在所述直播画面中所述人体部位对应的位置处显示所述虚拟乐器。
9.根据权利要求8所述的方法,其特征在于,所述在所述直播画面中显示所述虚拟乐器,包括:
在所述直播画面上层显示第一图层,所述第一图层包括所述虚拟乐器,所述第一图层中除所述虚拟乐器之外的其他位置的透明度符合预设条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州繁星互娱信息科技有限公司,未经广州繁星互娱信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011592216.3/1.html,转载请声明来源钻瓜专利网。





