Insider Insider

Nweon

nweon 文章

助厂商构建下一代VR/MR设备,高通发布骁龙XR2 Gen 2头显参考设计

高通的骁龙XR2 Gen 2芯片是XR头显市场的重要组成部分。该芯片通过优化骁龙8 Gen 2智能手机芯片组,针对虚拟现实和混合现实应用进行了改进。骁龙XR2 Gen 2采用4nm工艺节点制造,性能、能效和功能都有所提升。改进包括GPU提供高达2.5倍的峰值性能,CPU性能提高33%以上,NPU神经处理单元提供高达8倍的AI性能等。骁龙XR2 Gen 2支持高分辨率显示器、动态注视点渲染、空间扭曲和游戏超分辨率功能。在传感器方面,它可以处理多达10个摄像头的数据。骁龙XR2 Gen 2还支持Wi-Fi 7和6E无线标准以及蓝牙5.3和5.2。该芯片组的专用区域可以处理和加速关键的头显任务,减轻CPU和GPU的负担,降低功耗和延迟。基于骁龙8 Gen 2的VR/MR头显设计Snapdragon QXR2230P支持眼动追踪、手部追踪和MR透视。高通希望通过这款设计帮助厂商充分发挥骁龙8 Gen 2的潜力,为用户带来下一代的VR/MR头显。
助厂商构建下一代VR/MR设备,高通发布骁龙XR2 Gen 2头显参考设计

VR科幻冒险作品《Journey To Foundation》将于10月26日登陆PICO 4

游戏工作室Archiact近日宣布推出基于艾萨克·阿西莫夫的科幻小说《Foundation》的VR科幻冒险游戏《Journey to Foundation》。游戏将于10月26日登陆PICO 4平台。玩家将扮演特工沃德,潜入一群逃兵之中,并发现了一个可能改变历史进程的真相。玩家需要决定信任谁,并使用等离子炬、纳米技术伪装和黑客技能来解决问题。游戏中,玩家还将拥有心灵能力,可以感知和操纵他人的情绪。游戏团队表示,《Journey to Foundation》是他们所有创新VR游戏元素的经验成果,他们相信VR是一种强大的沉浸式角色扮演和叙事新媒介。游戏即将登陆PICO 4平台,值得期待。
VR科幻冒险作品《Journey To Foundation》将于10月26日登陆PICO 4

库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

苹果首席执行官蒂姆·库克在接受英国《独立报》专访时表示,他首次使用Vision Pro混合现实设备时感受到了“顿悟时刻”,认为这款设备有可能开创一个全新的计算时代,并对工作、沟通和体验世界的方式产生深远影响,类似于16年前的iPhone。库克强调,应用程序是Vision Pro成功的关键,因此他在欧洲和英国会见了一系列的应用开发者,希望他们能帮助实现他对Vision Pro的愿景。据库克透露,开发者对即将在明年年初发布的Vision Pro非常期待,他们已经创作出了令人难以置信的作品。库克还补充说,他每晚都使用Vision Pro,以帮助自己理解如何将其打造成一款行业定义的产品。他指出,人们对Vision Pro的看法存在巨大差异,这取决于他们是否实际尝试过,而当人们真正体验时,将会有一次顿悟时刻,而这样的时刻在一个人的一生中只会有几次。
库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta 在 Connect 大会上宣布对其 Presence Platform 功能进行了一系列升级,以增强下一代头戴设备的输入、交互和动捕能力。其中包括高保真上半身追踪、更自然和响应的交互方式以及逼真的双腿体验等。Meta 正在解决准确捕捉虚拟现实中腿部运动的难题,通过使用上半身信息来生成可能正在进行的下半身动作,实现更自然的动作表现。此外,Meta 还提供了 Inside-Out Body Tracking(IOBT)功能,利用头戴设备摄像头精确追踪上半身动作,从而提供比之前更准确、更自然的追踪系统。通过提升上半身追踪的准确性,IOBT 可以帮助用户更自然地进行跳跃、跳舞或走动等动作。Meta 还推出了手部追踪升级、增强交互体验以及声音输入功能。通过这些功能的升级和增强,Meta 旨在提供更无缝、更沉浸的 XR 体验。
Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta为Quest开发者发布一系列工具,助力开发创作和迭代

在Connect大会上,Meta发布了一系列工具,以帮助开发者更快地从构思走向迭代。其中包括Project Setup Tool和Meta XR Simulator。Project Setup Tool用于减少设置SDK的时间,通过自动修复库提醒和修复问题,帮助开发者解决兼容性、渲染或SDK问题。而Meta XR Simulator是一个轻量级的XR运行时,可以模拟Meta Quest设备和功能,通过键盘和鼠标输入模拟Quest头显和Touch控制器的运动和输入。使用这两个工具可以使MR项目启动和迭代过程更灵活有效。另外,Unity的AR Foundation现在支持Quest 3和Quest Pro,开发者可以通过AR Foundation构建一次MR应用,在不同平台上发布。这些工具的使用可以增强应用开发过程,减少设置和测试时间,提高开发效率,丰富用户体验。
Meta为Quest开发者发布一系列工具,助力开发创作和迭代

Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta公司表示,他们即将推出的Quest 3头显将实现高精度的上半身追踪,并计划在12月通过软件更新引入基于人工智能的下半身位置估计功能,从而实现全身Avatar的逼真映射。目前,大多数头显只能追踪头部和手部,由于摄像头数量和视场覆盖的限制,系统有时候需要借助逆向运动学(IK)来估计手臂位置,导致不准确。而Meta的Quest 3头显将利用多个前置摄像头,特别是侧面的摄像头以及先进的计算机视觉算法,能够准确追踪上半身,包括手腕、手肘、肩膀和躯干,实现内向外的身体追踪。此外,Meta还计划通过软件更新引入基于人工智能的双腿位置估计功能,称之为Generative Legs,但目前只支持粗略动作,无法覆盖细微的动作。通过结合上述功能,Quest 3将能够支持全身动作的逼真映射。
Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

Meta在Connect 2023大会上宣布,他们将在今年12月为Quest 3带来Xbox Cloud Gaming。用户可以使用Xbox Game Pass Ultimate和控制器,在一个巨大的2D屏幕上畅玩高质量的Xbox游戏,如《光环:无限》、《我的世界:传奇》、《极限竞速:地平线5》和《星空》等。在会议上,Meta的VR副总裁马克·鲁宾分享了更多细节。他提到,在Quest 3上运行《星空》等大作的可能性吸引了Xbox和Meta两方的注意,并且该游戏在Quest 3上的演示帮助说服了两家公司的高管。鲁宾表示,这得归功于Quest 3的混合现实技术,通过Xbox Cloud Gaming,系统可以在用户的客厅中创建一个类似电视的显示器,实现以巨大的2D屏幕玩游戏的体验。他对此感到非常激动,认为这展示了头显的力量。鲁宾指出,这种技术还处于起步阶段,但他们正在进行大量的优化,以确保2D面板在各个角度都能够出色地显示,并且不会失去分辨率。他对云游戏和混合现实的结合感到兴奋,并表示仍有需要改进的地方。
Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar

Meta首席执行官马克·扎克伯格在Connect大会上接受了媒体采访,其中包括莱克斯·弗里德曼的专访。这次采访的有趣之处在于两人以Codec Avatar的图片真实感化身进行对话。为了实现元宇宙的愿景,Meta一直在探索名为Codec Avatars的项目,利用3D捕捉技术和人工智能系统,帮助人们快速和轻松地创建图片真实感的虚拟化身,在虚拟现实中实现社交联系。在专访中,弗里德曼和扎克伯格都采用了Codec Avatar的形式,他们看到的化身不是卡通版的Avatar,而是图片真实感的化身。弗里德曼感叹不已,表示难以置信,同时注意到扎克伯格的表情映射非常精确,能够读懂微表情和肢体语言。扎克伯格解释道,目前的Codec Avatar只有上半身,下半身还面临挑战,但一旦完成,人们就能在元宇宙中实现与现实世界相同的共在。扎克伯格表示这个未来至少需要三年的时间,并将继续努力实现全身Codec Avatar。目前,实现图片真实感化身仍需要定制的昂贵系统。值得一提的是,苹果也在尝试为Vision Pro带来类似的图片真实感化身。
扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar

无需开发者调整,Quest 3会自动以最高分辨率渲染几乎所有的体验

在Reddit社区上,开发者是否需要手动调整游戏以支持Quest 3提升的画质成为高度关注的讨论话题之一。一位用户称几乎所有的游戏和应用都将在没有开发者干预的情况下自动实现画质提升。换句话说,即使没有开发者调整,Quest 3也会自动以最高分辨率渲染几乎所有的游戏和应用。在常用的Unity和Unreal引擎中,Quest开发者并不使用像素值来设置渲染分辨率,而是将其设置为相对于默认值的乘数。他们也可以使用Meta的动态分辨率缩放系统来设置最小或最大缩放,系统可以根据当前GPU应变实时调整分辨率。这意味着几乎所有的游戏在默认情况下都会看起来更清晰,而不需要开发者进行更新。然而,一位Reddit用户表示怀疑现有游戏是否会提供特定于Quest 3的增强功能,因为自动升级可能让开发者觉得没有必要进行额外投资。相反,现在才开始为Quest 3开发的游戏更有可能充分利用其硬件进行优化。
无需开发者调整,Quest 3会自动以最高分辨率渲染几乎所有的体验

这六款VR游戏即将登陆索尼PSVR 2

索尼通过六篇新博文宣布了即将发行的六款PSVR 2游戏。其中包括《Among Us VR》,这是一款基于热门的类狼人杀游戏《Among Us》改编的作品,玩家可以通过第一人称视角进行游戏。另外,《Heroes of Forever》是一款跨越维度和时间线的战斗游戏,支持多达四人合作。而《Journey to Foundation》是根据艾萨克·阿西莫夫的科幻小说《Foundation》改编的作品,玩家扮演一名特工解决各种难题。此外,《Tiger Blade》是一款黑色动作冒险游戏,故事发生在另一个韩国,玩家扮演一名刺客抢劫神秘的老虎幼崽。《Tin Hearts》则是一款背景设在以爱与妥协为背景的故事中的游戏,玩家引导玩具兵完成各种任务。最后,《Foglands》是一款roguelike游戏,在充满迷雾的世界中与怪物战斗,并争取逃离危险。这些游戏将于不同的时间发布,并且价格也不同。
这六款VR游戏即将登陆索尼PSVR 2