[发明专利]会议电视网真系统及其图像处理方法

说明书

技术领域

本发明涉及多媒体通信技术领域，具体而言，涉及一种会议电视网真系统及其图像处理方法。

背景技术

近年来红外光学测距技术开始兴起并逐步产品化，其中最典型的就是使用一个红外发射装置与一个红外摄像头来实现深度图像的采集。其中，红外发射装置用来生成结构光，红外摄像头通过扫描结构光在物体上的投影形状来获取深度图像。结构光是指一些具有特定模式的光，其投影图案可以是线、点、面等多种图形，并且随着距离的变化，光线投影的形状也发生变化。实际场景中，由于前景物体与背景物体在距离摄像头距离上存在一定差异，其深度图像上将存在较明显的区域性。利用深度图像的区域性以及普通光学摄像头得到的物体颜色区域性，能较好的区分背景与前景。

视频会议系统尤其是网真系统的背景环境往往比较固定，在视频会议系统中显示时，视频会议的背景不能改变，因此，在传统会议电视中，如果需要显示附加信息，则需要双流分屏显示。并且，由于视频会议电视的背景也是固定不变的，不能根据用户需求进行替换，从而降低了用户体验。

发明内容

针对相关技术中视频会议的背景不能改变的问题，本发明提供了一种会议电视网真系统及其图像处理方法，以至少解决上述问题。

根据本发明的一个方面，提供了一种会议电视网真系统，包括：虚拟背景生成装置、编码发送装置和接收解码装置。其中，所述虚拟背景生成装置包括：彩色图像与深度图像获取装置，用于获取会议场景的彩色图像与深度图像；背景分割装置，用于根据背景图像与前景图像在所述深度图像中的差异，对所述深度图像中的背景区域和前景区域进行初步分割，并将对所述深度图像的分割结果映射到所述彩色图像中，利用所述彩色图像中前景图像与背景图像的颜色差异，从所述彩色图像中分割出背景区域；背景生成装置，用于对所述背景分割装置从所述彩色图像分割得到的背景区域进行处理；编码发送装置，用于对经过所述背景生成装置处理后的所述彩色图像进行会议电视通用处理，其中，所述会议电视通用处理包括：编码压缩以及网络发送；接收解码装置，用于对网络媒体数据进行接收并解码显示。

优选地，彩色图像与深度图像获取装置包括：光学摄像头，用于采集会议场景的所述彩色图像；红外摄像头，用于采集会议场景的所述深度图像。

优选地，所述背景生成装置对从所述彩色图像分割得到的背景区域进行的处理包括以下至少之一：虚拟场景替换、动画播放、横幅叠加、及图形演示文稿双流。

优选地，所述背景分割装置包括：深度图像处理装置，用于对所述深度图像进行边缘检测算子边缘化，得到形状不规则的背景墙壁区域、前景区域、及噪声区域；深度图像分割装置，用于对所述深度图像处理装置处理后的所述深度图像进行膨胀处理和腐蚀处理，消除所述噪声区域，然后从消除所述噪声区域后的所述深度图像中得到规则的背景区域；彩色图像分割装置，用于将所述深度图像的规则的背景区域映射到所述彩色图像中，得到所述彩色图像的规则背景区域，并结合当前的所述彩色图像的色彩信息对所述彩色图像的规则背景区域中的前景区域进行精确化处理。

根据本发明的另一个方面，提供了一种会议电视网真系统的图像处理方法，包括：获取当前会议场景的彩色图像与深度图像；根据背景图像与前景图像在所述深度图像中的差异，对所述深度图像中的背景区域和前景区域进行初步分割，并将对所述深度图像的分割结果映射到所述彩色图像中，利用所述彩色图像中前景图像与背景图像的颜色差异，从所述彩色图像中分割出背景区域；从所述彩色图像分割得到的背景区域进行处理；对背景区域经过处理的所述彩色图像进行会议电视通用处理，其中，所述会议电视通用处理包括：编码压缩以及网络发送。

优选地，所述方法还包括：对网络媒体数据进行接收并解码显示。

优选地，获取当前会议场景的彩色图像与深度图像，包括：通过光学摄像头采集会议场景的所述彩色图像；通过红外摄像头采集会议场景的所述深度图像。

优选地，对从所述彩色图像分割得到的背景区域进行的处理包括以下至少之一：虚拟场景替换、动画播放、横幅叠加、及图形演示文稿双流。