[发明专利]实时视频

说明书

提供一种方法，它包括对于图像传感器的像素的子集的预定义群组中的每个子集：基于各自子集的标识，检索各自子集中的像素的位置和与各自子集对应的子帧中的位置之间的各自的预定义相互关系；提取各自子集的像素的像素值，并根据预定义的各自的相互关系将提取的像素值存储在对应子帧的位置中；当将提取的像素值存储在对应子帧中时，传送与各自子集对应的子帧以及各自子集的标识，而不管与群组中的其它子集对应的任何子帧的传输定时；其中群组中的不同子集的数量等于或大于2。

技术领域

本发明涉及与网络性能有关的设备、方法和计算机程序产品。特别地，本发明可涉及利用UE的不可移动性来改善网络性能。

缩写

2G/3G/4G/5G 第二/第三/第四/第五代

3GPP 第三代合作伙伴计划

CCD 电荷耦合装置

fps 帧/秒

HD 高清

JPEG 联合图像专家组

LL 低等待时间

MOD 取模

MPEG 运动图像专家组

NTSC 国家电视系统委员会

PAL 逐行倒相。

背景技术

下文给出关于常规数字视频传输的简短描述。

图1-1示出这样一种设置，其中相机以给定的帧速率拍摄视频帧。将捕获的视频信息传到视频编码器，该视频编码器可运用如以下项的进一步处理：例如可也考虑先前帧和后续帧的信息的数据压缩。

经由收发器单元通过[无线]通信路径传递数据，并且在对等侧经由收发器接收数据。在这里，解码器将解压缩数据（如果可适用的话），并根据需要进一步适配它（例如，将它进行缩放以便适应给定的显示器大小）。

相机通常以每帧的模式操作，即，视频信息作为全帧从相机传递到编码器。全帧包括由相机拍摄的图像的所有像素。典型的帧速率是24、25、29和50帧/秒。

如今的数字[视频]相机建立在现有视频格式（现有视频格式基于模拟相机时代的标准）上并使用全帧传输，即，在PAL中25帧/秒[fps]或在NTSC中29帧/秒。随着HD乃至4K视频的出现，50 fps的帧速率变得普及。

PAL是针对模拟视频传输设计为逐行捕获模式中的25 fps的标准。在模拟视频传输中，这意味着在接收侧上，在接收了图像的所有行之后显示图像，从而在模拟电视机上产生25 Hz图像速率。如此低的图像速率将会令人不快地闪烁，因此图像被拆分成两个子图像——一个具有偶数编号的行，另一个具有奇数编号的行。两个子图像相继显示，因此可达到50 Hz的“人工”图像速率。

在视频捕获和编码方面的优化工作非常关注更高分辨率的视频以及更佳的压缩方案，以便允许保留和传送高质量视频。实时视频传输只起很小的作用。

即使在使用50 fps（这处于如今的智能手机相机对于HD的极限）作为帧速率时，每个视频帧也比前一帧晚20 ms到达接收器，由此导致20 ms的不可避免的固有视频延迟。这种延迟紧接着传输延迟和处理延迟——从而使得实时视频（在它可能变得越来越普及于5G大众消费服务（联合演出、游戏）和工业应用中时）几乎不可能。

由于如今优化的焦点相当地在于视频压缩上，并且由于压缩编解码器在其考虑先前帧和随后帧的信息时表现最佳，因而这将导致来自于编码/解码的甚至更多的延迟。因此，这些优化甚至更加不利于实时视频的实现。