[发明专利]视频制作方法及相关装置有效
| 申请号: | 202010890456.5 | 申请日: | 2020-08-29 |
| 公开(公告)号: | CN112135201B | 公开(公告)日: | 2022-08-26 |
| 发明(设计)人: | 许雷;吴磊;王元吉;于志兴 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
| 主分类号: | H04N21/845 | 分类号: | H04N21/845;H04N21/44;H04N21/81;H04N21/439;G10L15/26 |
| 代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强;董文俊 |
| 地址: | 100080 北京市海淀区北*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 制作方法 相关 装置 | ||
1.一种视频制作方法,其特征在于,所述方法包括:
对第一产品视频进行分段处理,以得到第一子视频,所述第一子视频包括第一产品的介绍片段;
获取第一产品的产品信息在所述第一子视频中的目标位置信息;
根据所述目标位置信息,将所述第一子视频中所述第一产品的产品信息替换为第二产品的产品信息,以得到第二子视频;
将所述第二子视频和第三子视频进行拼接,以得到第二产品视频,所述第三子视频包括所述第二产品的介绍片段;
所述第一产品的产品信息包括第一产品的音频信息,所述根据所述目标位置信息,将所述第一子视频中第一产品的产品信息替换为第二产品的产品信息,以得到第二子视频,包括:
从所述第一子视频中获取所述第一产品的音频信息的音频轨道,所述音频轨道包括人声轨道和背景音乐轨道;
对所述音频轨道进行处理,以得到第一人声轨道和背景音乐轨道;
根据所述第一产品的音频信息在所述第一子视频包括的音频片段中的第三位置信息,将所述第一人声轨道中的第一产品的音频信息替换为所述第二产品音频信息,以得到第二人声轨道;
将所述第二人声轨道与所述背景音乐轨道进行合成,以得到所述第二产品音频信息的音频轨道;
根据所述第二产品音频信息的音频轨道,确定所述第二子视频。
2.根据权利要求1所述的方法,其特征在于,所述第一产品的产品信息包括第一产品标识、第一产品名称和第一产品的音频信息中的至少一种,所述获取第一产品的产品信息在所述第一子视频中的目标位置信息,包括:
通过视频识别模型对所述第一子视频中的多个图像帧进行识别处理,得到所述第一产品的产品信息在所述第一子视频中的目标位置信息,其中,所述视频识别模型包括文本识别模型、音频识别模型、口型识别模型、标识识别模型中的至少一种。
3.根据权利要求2所述的方法,其特征在于,
所述通过视频识别模型对所述第一子视频中的多个图像帧进行识别处理,得到所述第一产品的产品信息在所述第一子视频中的目标位置信息,包括下列中的至少一项:
通过标识识别模型对所述第一子视频中的至少一个第一图像帧进行标识识别处理,得到所述第一产品标识在所述至少一个第一图像帧中的第一位置信息;
通过文本识别模型对所述第一子视频中的至少一个第二图像帧进行文本识别处理,得到所述第一产品名称在所述至少一个第二图像帧中的第二位置信息;
通过音频识别模型对所述音频片段进行识别处理,得到所述第三位置信息;
通过口型识别模型对所述第一子视频中的所述多个图像帧进行口型识别处理,得到所述第一子视频中与所述第一产品的音频信息对应的至少一个第三图像帧,并基于所述至少一个第三图像帧确定所述第一产品的音频信息在所述音频片段中的第三位置信息。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述第一人声轨道进行语音识别,以得到所述第一产品的音频信息的第一文本信息;
根据所述第一文本信息和所述第二产品的产品信息,确定第二产品音频信息的第二文本信息;
对所述第二文本信息进行语音转换,以得到参考音频信息;
对所述参考音频信息进行处理,以得到所述第二产品音频信息,所述第二产品音频信息的音色与所述第一产品的音频信息的音色相同。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
根据所述第二产品的产品信息,获取至少一个候选产品视频;
根据所述至少一个候选产品视频中的产品信息和所述第二产品的产品信息,从所述至少一个候选产品视频中确定出所述第一产品视频。
6.根据权利要求5所述的方法,其特征在于,所述根据所述第二产品的产品信息,获取至少一个候选产品视频,包括:
从所述第二产品的产品信息中确定至少一个产品关键字;
根据所述至少一个产品关键字,确定产品视频的类型;
根据所述产品视频的类型,获取所述至少一个候选产品视频。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010890456.5/1.html,转载请声明来源钻瓜专利网。





