[发明专利]一种云端和边缘计算融合的视频会议信息系统和方法

权利要求书

1.一种云端和边缘计算融合的视频会议信息系统，其特性在于，包括云端服务器和多个用户终端，每个用户终端均包括功能增强模块和网络检测模块；用户终端用于获取当前用户的会议场景音视频，展示视频会议其他用户的会议场景音视频；网络检测模块用于实时监测并判断网络状态，功能增强模块用于对会议场景音视频进行功能增强；云端服务器用于根据相应用户终端上传的会议场景音视频建立和实时训练相应的云端会议场景模型，该云端会议场景模型和相应的视频会议用户拟合，并将计算处理后的会议场景音视频分别传输给视频会议其他用户终端。

2.根据权利要求1所述的视频会议信息系统，其特性在于，所述功能增强模块用于对会议场景音视频进行功能增强，包括提取人脸ROI特征进行人脸检测、人脸美颜增强、画质增强、提取画面前景区域ROI特征检测进行背景模糊化、语音增强、语音保真还原和环境噪声去除。

3.根据权利要求1所述的视频会议信息系统，其特性在于，根据每个用户终端上传的会议场景音视频的数据量，来判断对应的云端会议场景模型对网络状态的容忍度；当用户终端上传的会议场景音视频的数据量小于预设阈值，对应的云端会议场景模型和该用户的拟合度低，则判断对应的云端会议场景模型对网络状态的容忍度高，采用功能增强模块对当前用户的会议场景音视频进行功能增强；当用户终端上传的会议场景音视频的数据量大于预设阈值，对应的云端会议场景模型和该用户的拟合度高，则判断对应的云端会议场景模型对网络状态的容忍度低，采用当前用户的基础数据融合计算虚拟完整的会议场景音视频。

4.根据权利要求1所述的视频会议信息系统，其特性在于，当网络状态恶劣时，用户终端将当前用户的会议基础数据信息上传到到云端服务器，对应用户的云端会议场景模型停止训练，所述用户终端根据该用户终端采集的会议场景音视频建立和训练对应的用户端会议场景模型；当网络状态恢复良好时，对应的云端会议场景模型继续训练，用户端会议场景模型将当前用户的模型训练数据同步到对应的云端会议场景模型。

5.根据权利要求1所述的视频会议信息系统，其特性在于，所述网络检测模块根据数据包的丢包率、数据包发送后的反馈时延来判断当前的网络状态。

6.如权利要求1~5任一所述视频会议信息系统的使用方法，其特征在于，包括以下步骤：

S1：通过用户终端获取当前用户的会议场景音视频，展示视频会议其他用户的会议场景音视频；

S2：采用功能增强模块对会议场景音视频进行功能增强，并将增强后的会议场景音视频上传到到云端服务器；云端服务器根据相应用户终端上传的会议场景音视频建立和实时训练相应的云端会议场景模型，该云端会议场景模型和相应的视频会议用户拟合；

S3：采用网络检测模块实时监测网络状态，并实时判断网络状态是否良好；若是，则执行步骤S4，若否，则执行步骤S5；

S4：采用功能增强模块对当前用户的会议场景音视频进行功能增强，并将增强后的会议场景音视频上传到到云端服务器；云端服务器将增强后的会议场景音视频分别传输给视频会议其他用户终端；

S5：用户终端将当前用户的会议基础数据信息上传到到云端服务器，相应的云端会议场景模型根据该用户的基础数据融合计算虚拟完整的会议场景音视频；云端服务器将虚拟完整的会议场景音视频分别传输给视频会议其他用户终端。

7.根据权利要求6所述的视频会议信息方法，其特征在于，所述采用功能增强模块对会议场景音视频进行功能增强，包括提取人脸ROI特征进行人脸检测、人脸美颜增强、画质增强、提取画面前景区域ROI特征检测进行背景模糊化、语音增强、语音保真还原和环境噪声去除。