[发明专利]基于双向通信的全景视频播放拍照系统

说明书

本公开提供了一种基于双向通信的全景视频播放拍照系统。上述系统包括图像采集端、流媒体服务器端以及一个或多个用户端；图像采集端实时地对多路图片数据进行首次全景拼接，形成全景图像序列与多路图片数据之间的映射关系，通过第一传输模块将视频流推流到流媒体服务器端以传输给用户播放；第一传输模块采用双工工作模式；在第一传输模块接收到来自流媒体服务器端的请求图片指令时，将对应的多路图片数据发送给流媒体服务器端，以通过二次全景拼接得到用户所需照片而发送给用户。本发明的基于双向通信的全景视频播放拍照系统，占用带宽较小，传输和播放速度较快，并且能够在用户需要拍照时快速向其提供高分辨率的图片。

技术领域

本公开涉及通信技术，尤其涉及一种基于双向通信的全景视频播放拍照系统。

背景技术

在当今时代，视频播放越来越受大众的欢迎，纵观视频播放的发展史，是由视频点播的基础上演变而来，由互联网以及流媒体技术进行播放，从而能够实时、全面地传播视频内容。在早期的视频播放时，视频内容的可视区域因拍摄等原因，如：摄像机镜头的取景角度、范围，导致其固定不可调，用户只能观看到当前的区域，视频画面只能跟随镜头移动而变化，用户观看无立体感，更不能有身临其境的感受。

随着全景视频技术的发展，出现了360度全景视频，能够让用户全方位的360度自由观看，可以上下左右前后、甚至远近距离观看。通常是通过多个摄像机同时对同一个空间下的物体进行多个角度拍摄来实现，在播放端允许用户在无需暂停视频播放的情况下，自由切换观看角度；全景视频具有立体感和真实感，能够很好地提供视觉体验；可以实现身临其境的体验和更令人刮目相看的惊奇效果。

随着人们需求的不断提高，人们更希望在观看全景视频时不但可以看到真实、全面、直观的视频，还可以实时地获取高质量图像留作纪念或者与朋友分享。但是，图像数据的传输速度会受到传输带宽的限制，传输稳定性也会受到传输带宽的影响，即传输带宽会影响视频播放的流畅度和图像数据获取的即时性。

发明内容

在下文中给出了关于本公开的简要概述，以便提供关于本公开的某些方面的基本理解。应当理解，这个概述并不是关于本公开的穷举性概述。它并不意图确定本公开的关键或重要部分，也不意图限定本公开的范围。其目的仅仅是以简化的形式给出某些概念，以此作为稍后论述的更详细描述的前序。

鉴于现有技术的上述缺陷，本公开的目的之一是提供一种基于双向通信的全景视频播放拍照系统，以至少解决在视频播放中如何快速获得高分辨率图片的问题。

根据本公开的一个方面，提供了一种基于双向通信的全景视频播放拍照系统，该系统包括图像采集端、流媒体服务器端以及一个或多个用户端；所述图像采集端包括摄像模块、多媒体处理模块和第一传输模块；所述摄像模块适于采集其视野内的多路图片数据；所述多媒体处理模块适于：实时地对所述摄像模块采集的多路图片数据进行首次全景拼接以形成全景图像序列，根据时间对应关系形成多路图片数据和全景图像序列之间的映射关系，并保存所述映射关系以及至少部分多路图片数据，对所述全景图像序列进行压缩编码，得到压缩编码后的视频流，并将压缩编码后的视频流通过所述第一传输模块推流到流媒体服务器端，其中，所述第一传输模块采用双工工作模式，以及在通过所述第一传输模块接收到来自流媒体服务器端的请求图片指令时，基于所述请求图片指令中包含的查找对象信息，根据所述多路图片数据和全景图像序列的映射关系，在保存的所述至少部分多路图片数据中查找与所述查找对象信息对应的多路图片数据，作为查找结果通过所述第一传输模块而发送给所述流媒体服务器端；其中，所述查找对象信息包括待查找的全景图像帧的相关信息；所述流媒体服务器端适于从所述图像采集端实时接收所述压缩编码后的视频流以下发给对应的用户端，当接收到来自从所述图像采集端的查找结果后，对该查找结果中的多路图片数据进行二次全景拼接，得到二次全景拼接图像，并将该二次全景拼接图像的局部或整体图像作为输出结果下发给对应的用户端。