[发明专利]汉语与外语自动实时语音翻译并标注字幕的音像录播方法

说明书

技术领域

本技术方案属于声音和图像数据处理技术领域。

背景技术

目前市面上的汉语或外语有声影像资料的汉字或外文或其对照字幕叠加，一般通过人工方式将汉语或外语有声影像资料中的汉语或外语转换成汉字或外文，再交给视频画面或影像画面字幕叠加机将表达汉语意思的汉字字幕叠加在视频画面或影像画面上，同时通过翻译将汉语翻译成外语或反之将外语翻译成汉语，再通过配音演员将语音配到同步的视频画面或影像画面上，由于存在大量实时或非实时的汉语或世界各地的外语有声影像资料，包括电视录像和电影等有声影像资料，因此，如果单靠采用人工转换的方式会很费工费时而且很难做到实时传输，随着数字有声影像技术的出现，特别是计算机系统用于处理视频影像资料的技术出现，越来越需要有一种能自动实时将汉语或外语语音的音像分别相互转换成外语或汉语语音并加注字幕的技术出现，而且这种能自动根据汉语或外语语音实时转换成汉语或外语字幕的技术不但能在带汉字系统的计算机系统中运行，还能再不带汉字系统只带128个字符的ASCII码系统的以美国为代表的西方国家的计算机系统中运行，以满足世界互联网的日益广泛的运用和云计算、物联网以及世界各地汉语热的出现，中西文化交流越来越频繁的新形势的需要。

发明内容

本技术方案的提出就是为了解决上述出现这些问题。具体来说本技术方案通过采用以下的汉语与外语自动实时语音翻译并加注字幕的音像录播方法的技术来解决上述出现的问题：

本技术方案采用的是一种汉语与外语自动实时语音翻译并标注字幕的音像录播方法,在采用上述方法进行现场实时音像录播时，通过拾音器或话筒，将汉语或外语语音传输给录音录像设备，录音录像设备首先通过现有计算机软件做好通过摄像机摄制的影像资料中视频画面或影像画面与对应的有声语言的音频信号同步信号标记并储存在音像录播设备的储存系统中,然后将带同步信号标记的有声语言的音频信号提取出来传给嵌入在音像录播设备计算机中的汉语或外语语音识别模块，汉语或外语语音识别模块将汉语或外语语音识别成带与所识别的汉语或外语语音相同同步信号标记的用26个拉丁字母表示的汉语语音码或外文,再通过机器翻译模块将上述汉语语音码或外文分别翻译成用26个拉丁字母表示的与对应汉语语音码或外文句子具有相同同步信号标记的指定的外文或汉语语音码句子, 再将上述带同步信号标记的汉语语音码字幕或外文字幕或它们对照文本字幕传输给现有的视频画面或影像画面字幕叠加机模块，根据汉语语音码字幕或外文字幕或它们对照文本字幕与视频画面或影像画面同步信号标记的对应关系将字幕信息叠加在视频画面或影像画面上,同时将上述翻译成带同步信号标记的指定的外文或汉语语音码句子,通过语音合成模块合成成相应的带同步信号标记的外语或汉语语音，然后与具有相同同步信号标记的带字幕的视频画面或影像画面合成在一起并通过上述音视频编码压缩模块进行编码和压缩，经上述编码和压缩后再传输给网络传输模块，再由网络传输模块将编码和压缩后的上述具有相同同步信号标记的带字幕和语音的视频画面或影像画面传输到宽带网络，宽带网络将其连接到指定的服务器上进行储存，在服务器音视频解码解压缩软件模块、客户端音视频音像播放软件模块的支持下，所有登陆到这个服务器的终端都可以实时看到上述现场实时带字幕和语音的音像画面。

上述网络传输模块，可以是有线网络传输模块也可以是3G、4G、wifi、wimax、蓝牙无线网络传输模块，在采用有线网络传输模块时，上述宽带网络是有线宽带网络，在采用无线网络传输模块时，上述宽带网络是无线宽带网络。

上述的汉语语音码是以单词为单位，这里将单个汉字看作单音节词，根据组成该单词的每个音节的《汉语拼音方案》中的拼音，用且仅用26个拉丁字母对汉语拼音的声母、介母、韵母、声调采取先编码再依次按“声码+介码+韵码+调码兼隔音节符号”的顺序编码拼写，并通过得到的语音码的编码直接表达汉语信息，当直接用语音码编码来表示汉语信息时，其标点符号的用法同英文的标点符号的用法相同，编码时同一个单词的多个音节不用空格连续编码，单词与单词之间要有空格隔开。