[发明专利]图像流传输方法和支持该方法的电子设备

说明书

与相关申请的横向参考

本申请要求2016年9月1日在韩国专利局提交并被分配序列号10-2016-0112872的韩国专利申请以及2017年5月12日在韩国专利局提交并被分配序列号10-2017-0059526的韩国专利申请的权益，每个韩国专利申请的全部内容通过引用结合于此。

技术领域

本公开涉及用于从外部装置接收图像数据并流传输(streaming)图像的方法以及用于支持该方法的电子设备。

背景技术

随着电子设备的分辨率的增加，随着电子设备的计算速度的增加以及随着电子设备的图形处理装置的性能的增强，三维(3D)立体图像数据可以通过小型化和重量轻的虚拟现实(VR)装置(例如，智能眼镜、头戴装置(HMD)等)输出。

例如，HMD可以回放360度全景图像。HMD可以通过加速度传感器探测用户的头的运动或移动并可以输出他或她所看的区域的图像，由此向他或她提供各种VR图像。

用于输出3D立体图像的图像数据可以包括用于用户正在观察的区域的数据和用于围绕该区域的周边区域的数据。该图像数据可以在数据量上大于普通图像。

上述信息仅作为背景信息被呈现以帮助理解本公开。对于上述信息是否可以应用为相对于本公开的现有技术，还没有做出任何决定，也未给出确定。

发明内容

根据相关技术的虚拟现实(VR)装置可以在VR装置和流传输服务器之间建立的一个信道上同时接收构成三维(3D)投影空间的所有区域的图像数据。此外，由于用于虚拟3D投影空间上的所有区域的图像在质量上彼此相同，而与用户的视线信息无关，对于根据相关技术的VR装置而言，难于在有限的无线通信环境下提供高质量3D图像。

本公开的各方面是解决至少上面提及的问题和/或缺点并至少提供下面描述的优点。于是，本公开的各方面在于基于用户的视场(FOV)改善向VR装置的图像无线流传输。

根据本公开的一个方面，提供了一种电子设备。该电子设备包括：被构造成输出图像的显示器；被构造成与外部电子设备建立多个信道的收发器；以及处理器，该处理器被构造成将围绕电子设备的虚拟3D投影空间分类成多个区域，将多个区域中的每一个与多个信道中的一个相链接，在链接到多个区域的每一个上的每个信道上通过所述收发器从外部电子设备接收图像数据；以及基于接收的图像数据在显示器上输出流传输图像。

根据本公开的另一方面，用于流传输图像的方法和支持该方法的电子设备利用与3D投影空间的各区域链接的多个信道在有限无线通信环境下提供高质量3D图像。

根据本公开的另一方面，用于流传输图像的方法和用于支持该方法的电子设备对用户高兴趣率的区域输出高图像质量的3D图像数据并可以对于另一区域输出中等或低图像质量的图像数据。

从结合附图公开的本公开的各个实施例的下面的详细描述中，本公开的其他方面、优点和显著特征对本领域技术人员将变得明显。

附图说明

从下面结合附图的描述中，本公开的特定实施例的上述和其他方面、特征和优点将更加明显，图中：

图1是示出根据本公开的各种实施例的电子设备的结构的框图；

图2是示出根据本发明内容的各种实施例的图像流传输方法的流程图；

图3A和3B是示出根据本发明内容的各种实施例的流传输系统的结构的视图；

图4是示出根据本公开的各种实施例的从相机装置实时流传输的流程图；

图5是示出根据本公开的各种实施例的相机装置的图像捕捉的示例的视图；

图6是示出根据本公开的各种实施例的服务器的数据库的存储结构的视图；

图7A是示出根据本公开的各种实施例的虚拟现实(VR)输出装置的输出屏幕的示例的视图；

图7B是示出根据本公开的各种实施例的立方体的三维(3D)投影空间的视图；

图7C是示出根据本公开的各种实施例的将立方体的3D空间投影到球面上的示例的视图；

图8A是根据本公开的各种实施例的电子设备的结构的框图；

图8B是示出根据本发明的各种实施例的通过流传输输出图像数据的过程的流程图；

图9是示出根据本公开的各种实施例的利用去块滤波器减小表面之间的图像质量差的屏幕的示例的视图；

图10A和10B是示出根据本公开的各种实施例的虚拟3D投影空间的各种类型的示例的视图；

图11A和11B是示出根据本公开的各种实施例的正多面体3D投影空间的数据结构的示例的视图；