Nweon

nweon 文章

Meta:已在研究10年,15年,甚至20年后的VR硬件

2023年9月30日,Meta首席技术官安德鲁·博斯沃思在Instagram问答中回答了一些网友的问题。一位网友问到,Touch Plus控制器的续航能力是否可以媲美Quest 2的控制器。博斯沃思表示,他们正在努力保持与Quest 2相同的高标准,并且有意将其应用于Quest 3。另一位网友问到,Meta Horizon Worlds何时能够在全球范围内使用。博斯沃思表示,他希望尽可能多的人能够使用该平台,但这涉及到本地化和遵守当地法律等重要事项,因此他们正在积极努力,并表示目前没有宣布的事情。还有一位网友问到,除了价格之外,博斯沃思对Vision Pro和Quest 3有何看法。博斯沃思表示,Vision Pro是一款令人惊叹的设备,他们致力于将功能做到亲民和易于使用。最后,博斯沃思提到Meta在VR硬件方面的领先性,他们的实验室团队可能已经在探究10年、15年甚至20年后的VR硬件,并且可能同时开发三到四种不同的头显,其中有些看起来更像是未来2到5年的产品。
Meta:已在研究10年,15年,甚至20年后的VR硬件

Quest 3为控制器追踪覆盖范围带来了巨大变化

Meta Quest 3是一个消费者头显,带有新的无灯环控制器Touch Plus。Meta将红外LED从圆环移到了控制器的面板,同时在手柄底部增加了一个红外LED,以实现控制器定位。与Touch Pro不同,Touch Plus仍然利用头显光学追踪并通过改进的追踪算法来定位控制器。Quest 3的摄像头位置发生了变化,导致控制器的追踪区域与Quest 2有明显不同。Quest 3摄像头不能捕捉用户头顶上方的图像,但在用户的躯干周围和肩膀周围提供了更多的追踪覆盖。Touch Plus的触觉反馈有所改善,但没有达到Touch Pro的水平。此外,Touch Plus带来了迄今为止其他Touch控制器所没有的设计:Two-stage Index Trigger。然而,Touch Plus不包括Touch Pro的其他特定功能,如拇指板上的“捏”传感器和压力感应触控笔。
Quest 3为控制器追踪覆盖范围带来了巨大变化

助厂商构建下一代VR/MR设备,高通发布骁龙XR2 Gen 2头显参考设计

高通的骁龙XR2 Gen 2芯片是XR头显市场的重要组成部分。该芯片通过优化骁龙8 Gen 2智能手机芯片组,针对虚拟现实和混合现实应用进行了改进。骁龙XR2 Gen 2采用4nm工艺节点制造,性能、能效和功能都有所提升。改进包括GPU提供高达2.5倍的峰值性能,CPU性能提高33%以上,NPU神经处理单元提供高达8倍的AI性能等。骁龙XR2 Gen 2支持高分辨率显示器、动态注视点渲染、空间扭曲和游戏超分辨率功能。在传感器方面,它可以处理多达10个摄像头的数据。骁龙XR2 Gen 2还支持Wi-Fi 7和6E无线标准以及蓝牙5.3和5.2。该芯片组的专用区域可以处理和加速关键的头显任务,减轻CPU和GPU的负担,降低功耗和延迟。基于骁龙8 Gen 2的VR/MR头显设计Snapdragon QXR2230P支持眼动追踪、手部追踪和MR透视。高通希望通过这款设计帮助厂商充分发挥骁龙8 Gen 2的潜力,为用户带来下一代的VR/MR头显。
助厂商构建下一代VR/MR设备,高通发布骁龙XR2 Gen 2头显参考设计

VR科幻冒险作品《Journey To Foundation》将于10月26日登陆PICO 4

游戏工作室Archiact近日宣布推出基于艾萨克·阿西莫夫的科幻小说《Foundation》的VR科幻冒险游戏《Journey to Foundation》。游戏将于10月26日登陆PICO 4平台。玩家将扮演特工沃德,潜入一群逃兵之中,并发现了一个可能改变历史进程的真相。玩家需要决定信任谁,并使用等离子炬、纳米技术伪装和黑客技能来解决问题。游戏中,玩家还将拥有心灵能力,可以感知和操纵他人的情绪。游戏团队表示,《Journey to Foundation》是他们所有创新VR游戏元素的经验成果,他们相信VR是一种强大的沉浸式角色扮演和叙事新媒介。游戏即将登陆PICO 4平台,值得期待。
VR科幻冒险作品《Journey To Foundation》将于10月26日登陆PICO 4

库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

苹果首席执行官蒂姆·库克在接受英国《独立报》专访时表示,他首次使用Vision Pro混合现实设备时感受到了“顿悟时刻”,认为这款设备有可能开创一个全新的计算时代,并对工作、沟通和体验世界的方式产生深远影响,类似于16年前的iPhone。库克强调,应用程序是Vision Pro成功的关键,因此他在欧洲和英国会见了一系列的应用开发者,希望他们能帮助实现他对Vision Pro的愿景。据库克透露,开发者对即将在明年年初发布的Vision Pro非常期待,他们已经创作出了令人难以置信的作品。库克还补充说,他每晚都使用Vision Pro,以帮助自己理解如何将其打造成一款行业定义的产品。他指出,人们对Vision Pro的看法存在巨大差异,这取决于他们是否实际尝试过,而当人们真正体验时,将会有一次顿悟时刻,而这样的时刻在一个人的一生中只会有几次。
库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta 在 Connect 大会上宣布对其 Presence Platform 功能进行了一系列升级,以增强下一代头戴设备的输入、交互和动捕能力。其中包括高保真上半身追踪、更自然和响应的交互方式以及逼真的双腿体验等。Meta 正在解决准确捕捉虚拟现实中腿部运动的难题,通过使用上半身信息来生成可能正在进行的下半身动作,实现更自然的动作表现。此外,Meta 还提供了 Inside-Out Body Tracking(IOBT)功能,利用头戴设备摄像头精确追踪上半身动作,从而提供比之前更准确、更自然的追踪系统。通过提升上半身追踪的准确性,IOBT 可以帮助用户更自然地进行跳跃、跳舞或走动等动作。Meta 还推出了手部追踪升级、增强交互体验以及声音输入功能。通过这些功能的升级和增强,Meta 旨在提供更无缝、更沉浸的 XR 体验。
Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta为Quest开发者发布一系列工具,助力开发创作和迭代

在Connect大会上,Meta发布了一系列工具,以帮助开发者更快地从构思走向迭代。其中包括Project Setup Tool和Meta XR Simulator。Project Setup Tool用于减少设置SDK的时间,通过自动修复库提醒和修复问题,帮助开发者解决兼容性、渲染或SDK问题。而Meta XR Simulator是一个轻量级的XR运行时,可以模拟Meta Quest设备和功能,通过键盘和鼠标输入模拟Quest头显和Touch控制器的运动和输入。使用这两个工具可以使MR项目启动和迭代过程更灵活有效。另外,Unity的AR Foundation现在支持Quest 3和Quest Pro,开发者可以通过AR Foundation构建一次MR应用,在不同平台上发布。这些工具的使用可以增强应用开发过程,减少设置和测试时间,提高开发效率,丰富用户体验。
Meta为Quest开发者发布一系列工具,助力开发创作和迭代

Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta公司表示,他们即将推出的Quest 3头显将实现高精度的上半身追踪,并计划在12月通过软件更新引入基于人工智能的下半身位置估计功能,从而实现全身Avatar的逼真映射。目前,大多数头显只能追踪头部和手部,由于摄像头数量和视场覆盖的限制,系统有时候需要借助逆向运动学(IK)来估计手臂位置,导致不准确。而Meta的Quest 3头显将利用多个前置摄像头,特别是侧面的摄像头以及先进的计算机视觉算法,能够准确追踪上半身,包括手腕、手肘、肩膀和躯干,实现内向外的身体追踪。此外,Meta还计划通过软件更新引入基于人工智能的双腿位置估计功能,称之为Generative Legs,但目前只支持粗略动作,无法覆盖细微的动作。通过结合上述功能,Quest 3将能够支持全身动作的逼真映射。
Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

Meta在Connect 2023大会上宣布,他们将在今年12月为Quest 3带来Xbox Cloud Gaming。用户可以使用Xbox Game Pass Ultimate和控制器,在一个巨大的2D屏幕上畅玩高质量的Xbox游戏,如《光环:无限》、《我的世界:传奇》、《极限竞速:地平线5》和《星空》等。在会议上,Meta的VR副总裁马克·鲁宾分享了更多细节。他提到,在Quest 3上运行《星空》等大作的可能性吸引了Xbox和Meta两方的注意,并且该游戏在Quest 3上的演示帮助说服了两家公司的高管。鲁宾表示,这得归功于Quest 3的混合现实技术,通过Xbox Cloud Gaming,系统可以在用户的客厅中创建一个类似电视的显示器,实现以巨大的2D屏幕玩游戏的体验。他对此感到非常激动,认为这展示了头显的力量。鲁宾指出,这种技术还处于起步阶段,但他们正在进行大量的优化,以确保2D面板在各个角度都能够出色地显示,并且不会失去分辨率。他对云游戏和混合现实的结合感到兴奋,并表示仍有需要改进的地方。
Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar

Meta首席执行官马克·扎克伯格在Connect大会上接受了媒体采访,其中包括莱克斯·弗里德曼的专访。这次采访的有趣之处在于两人以Codec Avatar的图片真实感化身进行对话。为了实现元宇宙的愿景,Meta一直在探索名为Codec Avatars的项目,利用3D捕捉技术和人工智能系统,帮助人们快速和轻松地创建图片真实感的虚拟化身,在虚拟现实中实现社交联系。在专访中,弗里德曼和扎克伯格都采用了Codec Avatar的形式,他们看到的化身不是卡通版的Avatar,而是图片真实感的化身。弗里德曼感叹不已,表示难以置信,同时注意到扎克伯格的表情映射非常精确,能够读懂微表情和肢体语言。扎克伯格解释道,目前的Codec Avatar只有上半身,下半身还面临挑战,但一旦完成,人们就能在元宇宙中实现与现实世界相同的共在。扎克伯格表示这个未来至少需要三年的时间,并将继续努力实现全身Codec Avatar。目前,实现图片真实感化身仍需要定制的昂贵系统。值得一提的是,苹果也在尝试为Vision Pro带来类似的图片真实感化身。
扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar