[发明专利]一种用于正常人与聋哑人通讯的终端和通话方法

说明书

技术领域

本发明属于通讯技术领域，尤其涉及一种用于正常人与聋哑人通讯的终端和通话方法。

背景技术

随着互联网的发展和电信市场的开放，以及各种增值业务的出现，原有的PSTN电话已经远远不能满足要求。网络IP化，利用灵活的网络架构，实现网络和业务融合，提供新业务。于是基于互联网的可视电话技术出现，相关技术标准也发展成熟，比如IMS(IP Multimedia Subsystem,基于IP的多媒体子系统)，SIP(Session Initiation Protocol,会话初始协议)，音频电话编码标准(G.722，G.729AB,AMR-NB,I LBC,GSM,PCMA,PCMU,Speex-NB等)，视频电话标准(VP8,H264,MP4V-ES,Theora,H.263,H.263-1998,H.261等)，3GPP相关标准(3GPP TS 23.038,24.040,24.011,24.341and 24.451等)。现有的基于IMS/SIP的可视电话成熟产品很多，比如华为MC850。这是一款由华为推出的可视电话机，它基于SIP协议，配合华为IMS/NGN系统，实现SIP语音、视频通话。

现有的可视电话系统，可以实现通话双方语言沟通，也可以实现熟悉手语的聋哑残障人士或者正常人通过视频相互沟通。但是如果通话的一方是不懂手语的正常人，另一方是聋哑残障人士，现有的可视电话系统就无法实现这种情境下的双方沟通了。这是因为现有的可视电话系统不具备自然语言和手语的相互转化功能，同时现有的可视电话通信标准如IMS/SIP等音视频编解码标准在制定时也没有考虑到手语信息在通话双方之间的传输，没有为手语信息预留传输信道和制定传输协议。所以现有技术无法实现使用自然语言的正常人和使用手语的聋哑残障人士通信沟通。

现有技术中还有一些手语自动翻译系统方面的探索尝试，如果简单的将手语自动翻译系统与受话方合并，也可以简单的实现手语可视电话系统。其缺点在于：

a/如果语音识别引擎在受话终端机上，输入进语音识别引擎的语音数字采样是经过了语音编解码和UDP报文的不可靠传输，受语音编解码压缩算法失真和不可靠网络传输丢包的影响，此时的语音数字采样和送话终端机的语音数字采样相比，有较大失真。受此影响，语音识别引擎在受话终端机的方案的语音识别正确率大受影响。

b/语音识别和手语合成都是高度依赖系统计算资源的模块，这两个模块同时在受话终端机系统运行，消耗了大量的系统计算资源。

发明内容

本发明提供一种用于正常人与聋哑人通讯的终端和通话方法，旨在解决现有技术移动通讯终端无法使正常人与聋哑人进行自然语言的电话通讯的问题。

为实现以上目的，本发明提供一种用于正常人与聋哑人通讯的终端，包含：

语音采集模块，用于在通话状态下采集使用人的语音信息；

语音识别模块，用于识别所述语音信息并转化为文本信息；

通讯模块，用于将所述文本信息通过网络发送到对端；或者接收对端通过网络发送的文本信息；

手语合成模块，用于查找手语动画库，获得文本信息对应的手语动画；

显示模块：用于显示所述手语动画。

进一步的，还包含分路处理模块，用于将所述语音信息处理分为两路，一路用于转化为文本信息，另一路保留为语音信息。

进一步的，所述通讯模块进一步设置为，将文本信息和语音信息通过网络发送到对端；或者接收对端通过网络发送的文本信息和语音信息。

进一步的，还包含语音输出模块，用于播放接收到的语音信息。

进一步的，所述通讯模块包含：

语音发送单元，用于将语音信息送入VoIP协议栈和网络传输协议栈，封装为RTP和UDP报文，通过网络传输到对端；

文本发送单元，用于将文本信息送入VoIP协议栈和网络传输协议栈，封装为SIP和IP报文，经过网络传送到对端；

语音接收单元，用于接收对端发送的RTP和UDP报文并解码为语音信息；

文本接收单元，用于接收对端发送的SIP和IP报文并解码为文本信息。

为实现以上目的，本发明还提供一种正常人与聋哑人的通话方法，包含第一终端和第二终端，包含以下步骤：

第一终端与第二终端处于通话接通状态时，第一终端采集正常人的语音信息；

识别所述语音信息并转化为文本信息；

第一终端通过网络发送所述文本信息到第二终端；

第二终端接收所文本信息，查找手语动画库获取文本信息对应的手语动画并播放所述手语动画。