[发明专利]调节视频会议空间一致性方法、系统、设备、装置及介质

权利要求书

1.一种用于调节视频会议中的空间一致性的方法，所述方法包括：

将由视频端点设备采集的视觉场景展开为至少一个直线场景，所述视频端点设备被配置成以全向方式采集所述视觉场景；

检测所述至少一个直线场景与由音频端点设备采集的听觉场景之间的空间一致性，所述音频端点设备相对于所述视频端点设备被定位，所述空间一致性为所述听觉场景与所述至少一个直线场景之间校准的程度；以及

响应于所检测的空间一致性低于预定的阈值而调节所述空间一致性。

2.根据权利要求1所述的方法，其中展开所述视觉场景包括：

指派所采集的视觉场景的标称原方向；以及

将所采集的视频场景展开为从所述标称原方向处分割的一个直线场景。

3.根据权利要求1所述的方法，其中展开所述视觉场景包括：

指派所采集的视觉场景的标称原方向；以及

将所采集的视觉场景展开为从所述标称原方向处以及从关于所述标称原方向相对的方向处分割的两个直线场景。

4.根据权利要求1所述的方法，其中检测所述直线场景与所采集的听觉场景之间的所述空间一致性包括：

基于所采集的听觉场景来执行听觉场景分析以便识别音频对象的听觉分布，所述听觉分布为所述音频对象相对于所述音频端点设备的分布；

基于所述直线场景来执行视觉场景分析以便识别所述音频对象的视觉分布，所述视觉分布为所述音频对象相对于所述视频端点设备的分布；以及

根据所述听觉场景分析和所述视觉场景分析来检测所述空间一致性。

5.根据权利要求4所述的方法，其中执行所述听觉场景分析包括以下各项中的至少一项：

分析所述音频对象的到达方向；

分析所述音频对象的深度；

分析关键音频对象；以及

分析所述音频对象之间的会话互动。

6.根据权利要求4所述的方法，其中执行所述视觉场景分析包括以下各项中的至少一项：

执行针对所述音频对象的脸部检测或识别；

分析针对所采集的视觉场景或针对所述直线场景的感兴趣区域；以及

执行针对所述音频对象的唇部检测。

7.根据权利要求1至6中任一项所述的方法，其中调节所述空间一致性包括以下各项中的至少一项：

旋转所采集的听觉场景；

关于所述音频端点设备平移所采集的听觉场景；

关于由所述视频端点设备限定的轴线镜像所采集的听觉场景；

缩放所采集的听觉场景；以及

旋转所采集的视觉场景。

8.根据权利要求1至6中任一项所述的方法，其中所述空间一致性在现场被检测或在服务器处被检测。

9.根据权利要求1至6中任一项所述的方法，其中所述空间一致性在服务器处被调节或在所述视频会议的接收端处被调节。

10.一种用于调节视频会议中的空间一致性的系统，所述系统包括：

视频端点设备，被配置成以全向方式采集视觉场景；

音频端点设备，被配置成采集听觉场景，所述音频端点设备相对于所述视频端点设备被定位；

展开单元，被配置成将所采集的视觉场景展开为至少一个直线场景；

空间一致性检测单元，被配置成检测所述至少一个直线场景与所采集的听觉场景之间的空间一致性，所述空间一致性为所述听觉场景与所述视觉场景之间校准的程度；

空间一致性调节单元，被配置成响应于所检测的空间一致性低于预定的阈值而调节所述空间一致性。

11.根据权利要求10所述的系统，其中所述展开单元包括：

标称原方向指派单元，被配置成指派所采集的视觉场景的标称原方向；以及

分割单元，被配置成将所采集的视觉场景展开为从所述标称原方向处分割的一个直线场景。