NextVR,一家专门从事体育和娱乐内容的实时虚拟现实广播的公司,已经在2018年的CES上展示了其最新的广播技术。随着新一代更强大、更高分辨率的VR头盔的推出,NextVR技术的改进为VR视频内容带来了令人期待的更高质量和立体能力。
高端VR用户对360度视频内容的态度普遍不太好。由于在廉价硬件上捕捉360度视频非常容易,因此存在大量缺乏努力的低质量内容。与高分辨率、高帧率和高交互性的VR游戏形成鲜明对比,在高端头戴式设备的用户中,360度视频内容经常被轻描淡写地忽视,被认为是通常充满高度压缩、超出视界、非立体的困扰的混乱内容。
另一方面,NextVR是少数几家在制作和播放质量方面推动极限的公司之一,现在逐渐接近一个可以称之为‘VR视频’而不是普通‘360度视频’的质量和功能水平。现在市场上有更高分辨率的头盔,该公司最新的流程改进将使高端头戴式设备使用者更好地看到VR视频的真正潜力。
端到端的方法
NextVR最初于2009年成立为Next3D,是一家为3DTV内容创建压缩和实时广播技术的公司。在3DTV市场急剧下滑之后,该公司转型为NextVR,并在此后筹集了超过1亿美元的风险投资。
NextVR注重从捕捉到广播到观看的整个过程以及其中每一个细节。上个月,我与联合创始人大卫·科尔讨论了该公司的最新发展,很明显NextVR不仅仅是拍摄或托管视频内容。科尔解释说,公司构建了自己的相机设备,建立了自己的压缩、传输和播放技术,使NextVR处于一个与使用GoPro设备拍摄360度视频并将其上传到YouTube的电影制片人完全不同的级别。
正是这种端到端的方法使公司能够推动VR视频质量的边界,其最新的发展为这种由低端内容制约的介质带来了巨大希望。
提高质量
该公司首要推出的主要改进是视频质量的大幅提升,这可以在分辨率更高(在有线类别中)和更强大的处理器(在移动类别中)解码瓶颈中实现。
科尔表示,在最佳情况下,以8Mbps的带宽,公司现在能够每度传输20个像素,而之前仅为8.5个像素。请记住,这还是在立体和60FPS下。该公司计划在今年初向支持的设备(我们了解到现阶段仅有Windows VR头盔)推出这种更高分辨率的播放,但我已经在三星奥德赛VR头盔上试用过一款预览版本,它的像素计数比Rift和Vive等头盔要高出很多(1,440×1,600对1,080×1,200)。
通过观看该公司体育内容库中的片段,包括足球、篮球甚至怪物卡车赛,我对提高的质量印象深刻。更高的分辨率不仅能使细节更加清晰,而且极大地增强了立体效果,因为更明确的图像创造了更锐利的边缘,使立体深度更加明显。
这种增强的立体效果使整体效果更好,但在细节方面尤为显着,比如足球门的网,它与背后的场景清晰地分离开来。分辨率不足时,细节如网有时似乎与背景融为一体,而不是清晰地独立存在。深度。
60帧每秒的画面比360内容中常见的30帧每秒的画面更加流畅,也可以实现一定程度的慢动作;我惊叹地看着一辆巨型卡车在我面前的坡道上腾空而起,完成了一个完整的后空翻。在另一场景中,一辆怪物卡车在我附近急转弯,送起了大片细致的灰尘,向我飞来;这是图像质量、立体感和慢动作的一个很好的例子,我真切地感到有东西向我飞来了。
实时体积视频
除了提高质量外,NextVR还在适应体积捕捉和回放的流程,使观众的视角在视频中可以进行位置移动(而不仅仅是旋转)。增加这个额外的维度对于沉浸感来说非常重要,因为这意味着场景会根据您的移动以一种更加自然的方式进行反应。虽然VR视频内容一般假设为静态视角,但即使您“静止不动”时做出的微小移动也必须反映在您的视野中,以保持高度沉浸感。因此,虽然NextVR的体积解决方案不能让您在不破坏场景的情况下在室内尺寸的画面中四处走动,但对于坐姿内容来说,它仍然会带来很大的改变。
NextVR的联合创始人David Cole告诉我,该公司的捕捉和回放方法非常适合无延迟的体积回放,这一点至关重要,考虑到他们的主要价值主张之一是VR内容的实时广播。
Cole解释说,由于公司使用立体正交投影,也就是将场景的像素投影到三维网格上并传输到主机设备上,用于位置跟踪的新帧是在本地生成的,并以头显自己的刷新率显示(这意味着,就像旋转追踪一样,即使画面是60帧每秒,您在90Hz的头显上看到的也是90Hz的追踪)。每个传输的帧基本上都包含了场景的形状,所以当您转动头部以查看在以前您无法看到的对象后面的东西时,您不需要等待服务器发送一个带有头显更新位置的新帧(这会引入显著的延迟)。
NextVR的相机设备由不同级别的这些相机模块组成,具体取决于拍摄的画面类型。| 照片由Road to VR提供
我有机会亲眼见证了该公司的体积回放。再次戴上三星Odyssey头显,我发现自己坐在一个美丽的海滩上,夕阳下,周围是巨大的礁石和岩石,海浪拍打在我面前的脚边。当我移动头部时,我可以清晰地看到场景准确地在我周围移动,通过移动,我可以看到岩石的侧面,而在静态视角下我是看不到的。正如Cole所描述的那样,它感觉无延迟(除去了头显固有的延迟)。
体积海滩场景是一个很好的技术演示,但我没有看到足够多种类的体积内容,以了解它如何处理更具挑战性的场景,比如那些有更近距离和/或更快速移动的物体的场景。由于近距离物体往往会产生显著的“体积阴影”(相机被遮挡无法捕捉的空白区域),体积捕捉可能会受到限制,只适用于特定的、合适的制作。
该公司表示,体积观看功能将从今年开始推出,首先应用于点播内容,然后是实时广播。
见第2页:“要观看的令人惊叹之处”»
“要观看的令人惊叹之处”
通过这些更新和更好的头显,NextVR似乎正在为用户从“令人惊叹”的新奇之物转向“可观看”的常规观看路径上迈进。正如Cole所说,在这过程中,“要观看”的一个重要的缺失元素是与朋友一起观看内容的能力。目前,NextVR完全是单人的。体验;如果你在看足球、足球、拳击、赛车或其他任何项目,你是独自一人在做这些。
虽然目前还不愿意谈论他们对社交观影的方法,但Cole表示公司有“非常大的计划”,并暗示他们计划很快开始谈论这些计划。
NextVR已将他们的摄像机对准了各种专业体育内容,包括这场丹尼“Swift”加西亚和罗伯特“The Ghost”格雷罗之间的Premier Boxing Champions拳击比赛。
当我问到公司认为社交观影功能有多重要时,Cole表示他们不确定,但充满希望。“我受到VRChat社交吸引力的启发,”他说。
至于市场反响,公司以前只能在移动VR头戴设备上使用,但在2017年底终于在一些有线头戴式设备(PSVR和Windows VR)上推出了。Cole表示,公司对PSVR用户对NextVR内容的接受程度感到特别惊讶和鼓舞。他说,公司在各个平台上已经有650,000次下载,用户平均每次观看直播内容达到18.2分钟。
至于为什么公司仍未为两款主要的PC VR头戴设备(Rift和Vive)发布应用程序,Cole说有“一堆因素”,并且“我确实希望至少能看到我们在Vive Pro上推出一个客户端,但我们还没有正式宣布任何事情。”
0