Insider Insider

Nweon

nweon 文章

库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

苹果首席执行官蒂姆·库克在接受英国《独立报》专访时表示,他首次使用Vision Pro混合现实设备时感受到了“顿悟时刻”,认为这款设备有可能开创一个全新的计算时代,并对工作、沟通和体验世界的方式产生深远影响,类似于16年前的iPhone。库克强调,应用程序是Vision Pro成功的关键,因此他在欧洲和英国会见了一系列的应用开发者,希望他们能帮助实现他对Vision Pro的愿景。据库克透露,开发者对即将在明年年初发布的Vision Pro非常期待,他们已经创作出了令人难以置信的作品。库克还补充说,他每晚都使用Vision Pro,以帮助自己理解如何将其打造成一款行业定义的产品。他指出,人们对Vision Pro的看法存在巨大差异,这取决于他们是否实际尝试过,而当人们真正体验时,将会有一次顿悟时刻,而这样的时刻在一个人的一生中只会有几次。
库克:第一次尝试Vision Pro就顿悟到它有望开创全新的计算时代

Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta 在 Connect 大会上宣布对其 Presence Platform 功能进行了一系列升级,以增强下一代头戴设备的输入、交互和动捕能力。其中包括高保真上半身追踪、更自然和响应的交互方式以及逼真的双腿体验等。Meta 正在解决准确捕捉虚拟现实中腿部运动的难题,通过使用上半身信息来生成可能正在进行的下半身动作,实现更自然的动作表现。此外,Meta 还提供了 Inside-Out Body Tracking(IOBT)功能,利用头戴设备摄像头精确追踪上半身动作,从而提供比之前更准确、更自然的追踪系统。通过提升上半身追踪的准确性,IOBT 可以帮助用户更自然地进行跳跃、跳舞或走动等动作。Meta 还推出了手部追踪升级、增强交互体验以及声音输入功能。通过这些功能的升级和增强,Meta 旨在提供更无缝、更沉浸的 XR 体验。
Meta Quest MR功能全升级,赋能输入交互、动捕追踪等

Meta为Quest开发者发布一系列工具,助力开发创作和迭代

在Connect大会上,Meta发布了一系列工具,以帮助开发者更快地从构思走向迭代。其中包括Project Setup Tool和Meta XR Simulator。Project Setup Tool用于减少设置SDK的时间,通过自动修复库提醒和修复问题,帮助开发者解决兼容性、渲染或SDK问题。而Meta XR Simulator是一个轻量级的XR运行时,可以模拟Meta Quest设备和功能,通过键盘和鼠标输入模拟Quest头显和Touch控制器的运动和输入。使用这两个工具可以使MR项目启动和迭代过程更灵活有效。另外,Unity的AR Foundation现在支持Quest 3和Quest Pro,开发者可以通过AR Foundation构建一次MR应用,在不同平台上发布。这些工具的使用可以增强应用开发过程,减少设置和测试时间,提高开发效率,丰富用户体验。
Meta为Quest开发者发布一系列工具,助力开发创作和迭代

Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta公司表示,他们即将推出的Quest 3头显将实现高精度的上半身追踪,并计划在12月通过软件更新引入基于人工智能的下半身位置估计功能,从而实现全身Avatar的逼真映射。目前,大多数头显只能追踪头部和手部,由于摄像头数量和视场覆盖的限制,系统有时候需要借助逆向运动学(IK)来估计手臂位置,导致不准确。而Meta的Quest 3头显将利用多个前置摄像头,特别是侧面的摄像头以及先进的计算机视觉算法,能够准确追踪上半身,包括手腕、手肘、肩膀和躯干,实现内向外的身体追踪。此外,Meta还计划通过软件更新引入基于人工智能的双腿位置估计功能,称之为Generative Legs,但目前只支持粗略动作,无法覆盖细微的动作。通过结合上述功能,Quest 3将能够支持全身动作的逼真映射。
Quest 3通过AI支持逼真映射用户动作的全身Avatar

Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

Meta在Connect 2023大会上宣布,他们将在今年12月为Quest 3带来Xbox Cloud Gaming。用户可以使用Xbox Game Pass Ultimate和控制器,在一个巨大的2D屏幕上畅玩高质量的Xbox游戏,如《光环:无限》、《我的世界:传奇》、《极限竞速:地平线5》和《星空》等。在会议上,Meta的VR副总裁马克·鲁宾分享了更多细节。他提到,在Quest 3上运行《星空》等大作的可能性吸引了Xbox和Meta两方的注意,并且该游戏在Quest 3上的演示帮助说服了两家公司的高管。鲁宾表示,这得归功于Quest 3的混合现实技术,通过Xbox Cloud Gaming,系统可以在用户的客厅中创建一个类似电视的显示器,实现以巨大的2D屏幕玩游戏的体验。他对此感到非常激动,认为这展示了头显的力量。鲁宾指出,这种技术还处于起步阶段,但他们正在进行大量的优化,以确保2D面板在各个角度都能够出色地显示,并且不会失去分辨率。他对云游戏和混合现实的结合感到兴奋,并表示仍有需要改进的地方。
Meta:将与微软密切合作,为Quest 3带来无缝Xbox Cloud Gaming体验

扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar

Meta首席执行官马克·扎克伯格在Connect大会上接受了媒体采访,其中包括莱克斯·弗里德曼的专访。这次采访的有趣之处在于两人以Codec Avatar的图片真实感化身进行对话。为了实现元宇宙的愿景,Meta一直在探索名为Codec Avatars的项目,利用3D捕捉技术和人工智能系统,帮助人们快速和轻松地创建图片真实感的虚拟化身,在虚拟现实中实现社交联系。在专访中,弗里德曼和扎克伯格都采用了Codec Avatar的形式,他们看到的化身不是卡通版的Avatar,而是图片真实感的化身。弗里德曼感叹不已,表示难以置信,同时注意到扎克伯格的表情映射非常精确,能够读懂微表情和肢体语言。扎克伯格解释道,目前的Codec Avatar只有上半身,下半身还面临挑战,但一旦完成,人们就能在元宇宙中实现与现实世界相同的共在。扎克伯格表示这个未来至少需要三年的时间,并将继续努力实现全身Codec Avatar。目前,实现图片真实感化身仍需要定制的昂贵系统。值得一提的是,苹果也在尝试为Vision Pro带来类似的图片真实感化身。
扎克伯格用图片真实感化身接受采访,称三年内实现全身Codec Avatar

无需开发者调整,Quest 3会自动以最高分辨率渲染几乎所有的体验

在Reddit社区上,开发者是否需要手动调整游戏以支持Quest 3提升的画质成为高度关注的讨论话题之一。一位用户称几乎所有的游戏和应用都将在没有开发者干预的情况下自动实现画质提升。换句话说,即使没有开发者调整,Quest 3也会自动以最高分辨率渲染几乎所有的游戏和应用。在常用的Unity和Unreal引擎中,Quest开发者并不使用像素值来设置渲染分辨率,而是将其设置为相对于默认值的乘数。他们也可以使用Meta的动态分辨率缩放系统来设置最小或最大缩放,系统可以根据当前GPU应变实时调整分辨率。这意味着几乎所有的游戏在默认情况下都会看起来更清晰,而不需要开发者进行更新。然而,一位Reddit用户表示怀疑现有游戏是否会提供特定于Quest 3的增强功能,因为自动升级可能让开发者觉得没有必要进行额外投资。相反,现在才开始为Quest 3开发的游戏更有可能充分利用其硬件进行优化。
无需开发者调整,Quest 3会自动以最高分辨率渲染几乎所有的体验

这六款VR游戏即将登陆索尼PSVR 2

索尼通过六篇新博文宣布了即将发行的六款PSVR 2游戏。其中包括《Among Us VR》,这是一款基于热门的类狼人杀游戏《Among Us》改编的作品,玩家可以通过第一人称视角进行游戏。另外,《Heroes of Forever》是一款跨越维度和时间线的战斗游戏,支持多达四人合作。而《Journey to Foundation》是根据艾萨克·阿西莫夫的科幻小说《Foundation》改编的作品,玩家扮演一名特工解决各种难题。此外,《Tiger Blade》是一款黑色动作冒险游戏,故事发生在另一个韩国,玩家扮演一名刺客抢劫神秘的老虎幼崽。《Tin Hearts》则是一款背景设在以爱与妥协为背景的故事中的游戏,玩家引导玩具兵完成各种任务。最后,《Foglands》是一款roguelike游戏,在充满迷雾的世界中与怪物战斗,并争取逃离危险。这些游戏将于不同的时间发布,并且价格也不同。
这六款VR游戏即将登陆索尼PSVR 2

中等职业技能培训VR解决方案商Transfr获4千万美元C轮融资

VR解决方案商Transfr宣布完成了4000万美元的C轮融资,由ABS Capital领投,摩根大通旗下Impact Finance & Advisory、Lumos Capital Group、Akkadian Ventures、Spring Tide Capital和Firework Ventures等参投。这使得Transfr的总融资额已经超过9000万美元。Transfr计划利用这笔资金建设团队,扩大平台和影响力,使更多人能够探索、学习和联系制造业、技术贸易和医疗保健等高增长行业的职业机会。资金还将用于开发新的模拟训练,涵盖更广泛的技能和场景,并为现有训练增加功能,包括提供西班牙语培训。Transfr表示,目前在美国,中等技能职业需求量大,但只有43%的劳动力接受过相关培训。该公司利用验证过的VR培训技术构建了沉浸式的中等职业技能培训,并已在1000多个地点部署,包括社区学院、贸易学校、雇主、监狱和K-12学校,涵盖多个行业。去年,Transfr的用户群增加了10倍,学员完成了40多万次模拟培训。该公司的创始人兼首席执行官表示,这笔投资将帮助Transfr继续投资于未被发现的人才,并开发更多的模拟和解决方案。
中等职业技能培训VR解决方案商Transfr获4千万美元C轮融资

受生成式AI冲击,Snap解散仅成立半年的企业AR部门ARES

Snap宣布解散半年前成立的AR部门ARES,并裁员约170人。ARES的服务难以吸引客户,因为生成式AI的普及使得企业可以轻松构建相关AR试用体验。不过,Snap强调将继续投资AR业务,包括在Snapchat发展AR赞助业务的新机会。在2022年经历了不佳的财报业绩之后,Snap进行了架构重组,并增加对社区发展、营收增长和AR业务的关注。Snap最初相信可以利用现有的移动AR技术,并投入Web AR技术,但这对客户而言过于复杂且缺乏吸引力。随着生成式AI的兴起,各种规模的企业现在可以更轻松地构建相关的AR试用体验,无需借助Snap的服务。叠加集团业绩不佳并将资源集中在核心广告业务,Snap难以继续投资AR领域,因此决定解散ARES部门。尽管解散ARES,但Snap表示将继续投资AR业务,并支持CameraKit合作伙伴和全球数百万使用Snap AR平台提供AR体验的用户,并确定了在Snapchat发展AR赞助业务的新机会。
受生成式AI冲击,Snap解散仅成立半年的企业AR部门ARES