[实用新型]一种基于语音跟踪的全景视频录制设备

说明书

本实用新型公开一种基于语音跟踪的全景视频录制设备，设备括外壳，所述外壳上设置有视频采集装置和音频采集装置，所述外壳内设置有视频处理装置、音频处理装置、微处理器、人机交互模块和网络传输模块。上述方案的有益效果是通过单一的高度集中的录制设备采用全景视频结合语音定位和图像识别的方式实现对视频中发言人的跟踪及特写功能，同时具有特写和会议全貌无缝切换的功能，也可以进一步缩减成本，有利于录播系统的推广。

技术领域

本实用新型涉及全景视频录制技术领域，特别涉及一种基于语音跟踪的全景视频录制设备。

背景技术

通常的使用遥控器的视频会议摄像机位调整方位，需要与会人员或者专门的人手进行手动控制，该方式显然是影响会议体验的，与会者无法全心全意的投入会议，无形之中降低了会议的效率。

同样根据发言者开启传声器来进行摄像机机位自动判断和调整的方法也存在其不足，比如需要在每个与会人员面前都设置一个单独的传声器，而现在视频会议通常会采用一个全向麦替代每个人面前的单独的传声器，可以增加设备的集成度也保持了会议桌面的整洁。

宝利通的方案(中国专利CN102256098A)采用了一个语音定位装置、2个高清摄像头、一个主机；采用的设备及外设数目比较多，而且该方案在双摄像头的情况下，只能特写两个发言人，具体实现是当第二个人同时发言的时候，经过策略判断后，将房间画面摄像头也用于拍摄发言人特写；这种方案下，如果有更多的人发言的话，需要增加摄像头，进一步添加外接设备。

因此，有必要提出一种新的录制设备。

实用新型内容

本实用新型的主要目的是提出一种基于语音跟踪的全景视频录制设备，旨在采用单一全景视频录制设备结合语音定位和图像识别的方式，实现视频中发言人的跟踪及特写功能，同时具有特写和会议全貌无缝切换的功能。

为实现上述目的，本实用新型提出的基于语音跟踪的全景视频录制设备，包括外壳，所述外壳上设置有视频采集装置和音频采集装置，所述外壳内设置有视频处理装置、音频处理装置、微处理器、人机交互模块和网络传输模块；所述视频采集装置和音频采集装置嵌入设置在所述外壳上，并分别与外壳内设置的视频处理装置和音频处理装置对应连接，所述微处理器分别与所述视频处理装置、所述音频处理装置、所述网络传输模块和所述人机交互模块通讯连接。

优选地，所述外壳设置为球型外壳，所述视频采集装置包括设置在球型外壳顶部的第一摄像头、以及均匀排布在球型外壳侧边的若干第二摄像头。

优选地，所述音频处理装置包括均衡设置在球型外壳侧边的若干麦克风阵列，每一麦克风阵列包括均匀排布在球型外壳侧边的若干麦克风。

优选地，所述球型外壳底部还设置有一底部支架。

优选地，所述音频处理装置包括音频定位模块和音频处理模块，所述音频处理模块用于处理所述音频采集装置采集的音频数据的音频质量，所述音频定位模块通过TDOA算法确定发言者的位置并将方位信息发送给所述视频处理装置。

优选地，所述视频处理装置包括全景视频拼接模块和视频处理模块，所述全景视频拼接模块用于对所述视频采集装置采集到的视频进行全景拼接，所述视频处理模块用于处理视频参数，以及根据所述音频处理装置发送的发言者方位信息进行图像识别并获取发言者的特写画面视频。

优选地，还包括音视频输出接口，所述音视频输出接口用于输出处理后的音视频数据。

本实用新型技术方案的有益效果如下：

1,本实用新型将语音定位功能与全景视频系统结合。通过语音定位功能，可以实现视频会议中的发言人自动跟踪及特写，也可以实现自动跟踪声源的录播系统。