[发明专利]视频上传、播放的方法、装置、客户端设备及存储介质在审
申请号: | 201911023915.3 | 申请日: | 2019-10-25 |
公开(公告)号: | CN110730360A | 公开(公告)日: | 2020-01-24 |
发明(设计)人: | 王聪 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | H04N21/233 | 分类号: | H04N21/233;H04N21/439;H04N21/44;G10L15/26 |
代理公司: | 11413 北京柏杉松知识产权代理事务所(普通合伙) | 代理人: | 项京;高莺然 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 手语 动作视频 虚拟人物 视频 上传 目标文字 视频上传 听障人士 客户端 指令 预设 播放 播放窗口 播放目标 存储介质 视频观看 视频生成 数据对应 文字数据 有效获取 语音数据 预先建立 观看 服务器 直播 | ||
本公开关于视频上传、播放的方法、装置、设备及存储介质,视频上传的方法应用于视频生成客户端,可以包括:将待上传视频中的语音数据转为目标文字数据;根据预先建立的文字数据与手语指令的对应关系,确定目标文字数据对应的至少一条目标手语指令;按照目标手语指令,确定预设的目标虚拟人物手语动作视频;将待上传视频和目标虚拟人物手语动作视频上传至服务器,以使视频观看客户端,在播放待上传视频时,通过预设的播放窗口播放目标虚拟人物手语动作视频。可见,在本公开实施例中,听障人士可以在观看直播或短视频等形式的视频时,观看到目标虚拟人物手语动作视频,能够有效获取信息,提高了听障人士的观看体验。
技术领域
本公开涉及视频上传、视频播放的技术领域,尤其涉及视频上传、视频播放的方法、装置、客户端设备及存储介质。
背景技术
随着视频自媒体的迅速发展,视频直播和短视频等形式的自媒体成为传递信息的主要工具。但是听障人士由于患有残疾性听力损失,在观看视频时,无法有效的从视频直播和短视频等形式的自媒体中获取信息,听障人士的观看体验较低。
发明内容
本公开提供视频上传、视频播放的方法、装置、客户端设备及存储介质,以至少解决相关技术中听障人士无法有效的从直播和短视频等形式的自媒体中获取信息,听障人士的观看体验较低的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种视频上传的方法,应用于视频生成客户端设备,包括:
将待上传视频中的语音数据转为目标文字数据;
根据预先建立的文字数据与手语指令的对应关系,确定所述目标文字数据对应的至少一条目标手语指令;
按照所述目标手语指令,确定预设的目标虚拟人物手语动作视频;
将所述待上传视频和目标虚拟人物手语动作视频上传至服务器,以使视频观看客户端从服务器获得所述待上传视频及目标虚拟人物手语动作视频,在播放所述待上传视频时,通过预设的播放窗口播放所述目标虚拟人物手语动作视频。
可选的,所述按照所述目标手语指令,确定预设的目标虚拟人物手语动作视频的步骤,包括:
根据待上传视频中语音数据对应的播放时间,确定各个目标手语指令与所述待上传视频中视频帧画面的对应关系;
基于各个目标手语指令、各个目标手语指令与所述待上传视频中视频帧画面的对应关系及预设的虚拟人物,生成目标虚拟人物手语动作视频。
可选的,所述将待上传视频中的语音数据转为目标文字数据的步骤,包括:
获取待上传视频;
从所述待上传视频中获取语音数据作为目标语音数据;
将所述目标语音数据转为目标文字数据。
可选的,在所述从所述待上传视频中获取语音数据作为目标语音数据的步骤之前,还包括:
判断当前是否为上传虚拟人物手语动作视频的上传状态;所述上传状态,包括上传虚拟人物手语动作视频状态,和非上传虚拟人物手语动作视频状态,由用户预先设置;
如果是,则执行所述从所述待上传视频中获取语音数据作为目标语音数据的步骤。
可选的,所述从所述待上传视频中获取语音数据作为目标语音数据的步骤,包括:
将所述待上传视频中的音频数据实时转换为非压缩的波形文件,输入到预先训练好的神经网络模型;
获取所述神经网络模型预测出的目标波形文件;所述神经网络模型,用于对非压缩的波形文件进行切割,得到语音数据中各个语句对应的目标波形文件作为目标语音数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911023915.3/2.html,转载请声明来源钻瓜专利网。