苹果AR/VR头显专利可实现<5ms的无线串流视频传输
苹果公司曾申请多份关于可用于虚拟现实/增强现实的视频编码系统的专利,主要目的是在对高分辨率视频进行编码和传输时实现低延迟和节省资源。其中一份名为“Versatile tile coding for multi-view video streaming”的专利提到了Sliced Based和Tile Based技术,将视频图像划分为若干个Slice或Tile,并根据用户的视域传输特定视域的Slice或Tile,以节省资源。
该视频编码系统的实施例可以通过小波变换和频带组织将像素数据分解为Blocks像素块,并进行编码/压缩。在速率控制组件的调整下,视频编码系统可以在无线链路上保持目标帧速率,并最小化帧渲染、传输和传输中的延迟。
此外,视频编码系统还可以根据感兴趣区域的分辨率优化帧的显示质量,并在block level调整编码器参数。通过这些方法,视频编码系统的实施例可以实现速率控制,以满足虚拟现实/增强现实系统对低延迟和高显示质量的需求。