著名开发者约翰·卡马克(John Carmack)是将Oculus Rift推向市场的人之一,并最近一直在进行大量的虚拟现实研究。卡马克对延迟特别感兴趣。具体来说,他希望降低延迟,以至于在使用VR头显内部查看虚拟现实世界时能真正感觉到真实。最近,他发表了一篇论文,讨论了“延迟缓解策略”。
低延迟对于让人感觉真正置身于虚拟现实游戏中非常重要。仅仅在头戴式显示器上添加一个快速的头部追踪器并不简单到一哄而了事。需要多个硬件设备共同协作,根据你的头部动作正确渲染游戏世界,并且通过这个设备流程的往返可能需要相当长的时间。
如果端到端延迟不低,那么你进入虚拟现实世界的视角会感觉迟钝。卡马克写道:
总系统延迟为50毫秒,会感觉反应灵敏,但仍然稍微有延迟。在看着一个清晰的垂直边缘时,通过将头左右摇动沿着视线方向来看延迟的影响是最简单的。延迟会导致垂直线条在头运动时出现倾斜;视角感觉“随着”头运动而移动。当延迟足够低时,虚拟世界会让你有真实感觉,好像只是在旋转你的视角,而且世界是稳定的。
延迟过高不仅会破坏虚拟现实的幻觉,还可能导致晕动病,甚至使游戏难以进行。最小化延迟对于虚拟现实体验至关重要,这个问题目前尚未解决。
Oculus公司在2013年的CES展览上表示,他们将Oculus Rift的端到端延迟降低到了80毫秒,不过他们很可能还在继续努力将这个数字降低。
在这篇在#AltDevBlogADay上发表的论文中,卡马克提出了几项措施,可以将端到端延迟降低到可接受的水平。据他所说,低于20毫秒的延迟很难察觉。虽然目前的硬件可以达到这个水平,但需要进行一些仔细的工作来实现。
根据卡马克的说法,在理想的情况下,传感器数据从头戴式显示器发送到计算机,然后…
操作系统立即处理更新,并立即通过GPU加速渲染直接传输到帧缓冲区,没有任何页面翻转或缓冲。显示器接受视频信号时没有缓冲或处理,并在微秒级内开始发射新的光子。
他继续说道:“在典型的虚拟现实系统中,许多事情都远不如此优化,有时会导致端到端超过100毫秒的延迟。”
问题不在硬件本身,而是现代游戏不需要如此高水平的延迟优化,因此行业在减少延迟方面的技术手段主要被忽视了。
这篇论文继续以相当技术的水平描述了如何采取措施来降低端到端延迟。如果你是一个为Oculus Rift制作虚拟现实游戏的开发者,阅读这篇论文可以帮助你了解一些你将面临的延迟挑战。