[发明专利]一种数字虚拟人交互系统及其计算传输优化方法

说明书

本发明提出了一种数字虚拟人交互系统及其计算传输优化方法，属于音视频传输技术领域。包括：可视化大屏，其用于展示虚拟人形象以及图表、文字数据；RTSP服务器集群，用于为可视化大屏提供音视频媒体流；代理服务器，其连接在可视化大屏与RTSP服务器集群之间，用于转发RTSP服务器生成的实时音视频媒体流，以及用于提供自身存储的本地音视频媒体流至可视化大屏；用户客户端，其用于连接可视化大屏并实现与可视化大屏中虚拟人的交互。本发明在RTSP服务端和可视化大屏之间增加了代理，可以实时控制媒体流的传输，有助于对可视化大屏进行管理，优化了音视频流的传输方式。

技术领域

本发明涉及音视频传输技术领域，具体涉及一种数字虚拟人交互系统及其计算传输优化方法。

背景技术

随着企业数据的海量积累，大屏数据可视化需求正在逐步扩大：监控中心、指挥调度中心需要依据实时数据快速做出决策；公司展厅、展览中心需要数据展示平台；电商类企业在大促活动时，通过对外公布实时销售数据作为广告手段；演示场景如会议厅、演播厅、购物中心、车站、机场需要通过大屏进行信息展示、宣传广告等。

实时流传输协议(RTSP)是TCP/IP协议族中的一种应用层协议，该协议位于实时传输协议(RTP)和实时传输控制协议(RTCP)之上，RTSP协议定义了一些控制行为，包括OPTIONS、DESCRIBE、SETUP、TEARDOWN、PLAY、PAUSE、SCALE、GET_PARAMETER。

基于实时流传输协议(RTSP)进行RTSP服务端与大屏之间的数据传输的技术日渐成熟，但当前可视化数据大屏可交互性差，浪费RTSP服务端资源，这是由于当前可视化大屏端拉取RTSP流无法进行流的中间处理，在集群环境下，可视化大屏端也无法进行有效的负载均衡，并且在无用户使用时，可视化大屏端需要一直占用RTSP连接，不能充分利用RTSP服务端资源。

发明内容

为了解决上述技术问题，本发明提出了一种数字虚拟人交互系统及其计算传输优化方法，在RTSP服务器和可视化大屏端之间设置实时流协议代理服务器，其具有负载均衡和媒体流代理转发的功能，并且支持在可视化大屏端无用户使用时播放本地音视频数据。

为了实现上述目的，本发明采用的技术方案如下：

本发明的其中一个目的是提供一种数字虚拟人交互系统，包括：

可视化大屏，其用于展示虚拟人形象以及图表、文字数据；所述的图表、文字数据根据虚拟人形象的表达内容进行匹配更新；

RTSP服务器集群，其由若干RTSP服务器构成，用于为可视化大屏提供音视频媒体流，所述的音视频媒体流包括用于驱动虚拟人形象的肢体、五官动作视频和相对应的音频；

代理服务器，其连接在可视化大屏与RTSP服务器集群之间，用于转发RTSP服务器生成的实时音视频媒体流，以及用于提供自身存储的本地音视频媒体流至可视化大屏；所述的代理服务器实时监督可视化大屏的交互状态，当可视化大屏处于交互状态时，利用负载均衡器从RTSP服务器集群中选中并连接一台RTSP服务器；当可视化大屏处于非交互状态时，断开与RTSP服务器的连接，利用可视化大屏播放代理服务器中存储的本地音视频媒体并展示相对应的图表、文字数据；

用户客户端，其用于连接可视化大屏并实现与可视化大屏中虚拟人的交互。

进一步的，所述的RTSP服务器集群中还包括：

语音收集模块，其用于获取用户提问的语音音频；

文本转换模块，其用于将用户的语音音频转换为文字语句；

意图识别模块，其用于根据意图识别模型获取文字语句所对应的意图；

对话知识库，其存储有不同意图的问题所对应的答案，用于接收识别到的意图并输出最佳答案；