Nweon

nweon 文章

Meta正式推出IOBT和Generative Legs,用AI支持全身Avatar

Meta早前发布的Inside-Out Body Tracking(IOBT)和Generative Legs已经正式通过v60支持Unity和Native(Unreal待支持),现在开发者可以实现逼真映射用户动作的全身Avatar。目前大多数头显只能追踪用户的头和手,而Meta的全新消费者头显Quest 3可以利用多个前置摄像头和先进的计算机视觉算法来追踪上半身,精确追踪手腕、手肘、肩膀和躯干,称之为内向外身体追踪(IOBT)。此外,Meta还提供了Generative Legs/生成式双腿,通过人工智能模型估算双腿的位置,可以提供更精确的双腿估计。不过由于只是估算,Generative Legs目前只能支持粗略的行走、跳跃、蹲下等动作。现在开发者可以同时结合Inside-Out Body Tracking(IOBT)和Generative Legs,并实现能够逼真映射用户动作的全身Avatar。此外,Meta还在不断优化Quest系统,包括在10月推出了Mesh API和实验性版本的Depth API,提高混合现实的交互和真实感。
Meta正式推出IOBT和Generative Legs,用AI支持全身Avatar

这个Meta Quest 3应用可在MR中可视化和控制智能家居设备

一款全新的MR应用程序正在为Quest 3进行Beta测试,该应用程序允许用户通过看+指的方式来感知和控制智能家居设备。使用开发者提供的Immersive Home,用户可以通过Quest 3在混合现实中实现这一点。为了使用Immersive Home,用户需要Meta Quest头显和一个或多个智能家居设备。虽然Meta Quest 3和Quest Pro可以提供最佳效果,但该应用程序也支持Quest 2甚至是初代Quest。演示视频展示了与设备互动的有趣功能,并且根据相关开发者日志指出已经添加了手部追踪,因此用户可以进行裸手操作。
这个Meta Quest 3应用可在MR中可视化和控制智能家居设备

“剪掉”数据线,Meta Quest现已支持WiFi无线投屏未裁剪影像

据最新消息,Meta Quest的投屏功能Casting 2.0现已支持完全无线WiFi投屏,不再需要使用USB 3.0数据线。过去的投屏功能会裁剪影像,但Casting 2.0 Beta的Cinematic模式解决了这个问题,可以捕获完整的16:9图像,而不会裁剪顶部或底部。然而,想要将未裁剪的宽屏影像传输到PC,仍需使用USB 3.0数据线。这一更新将为VR领域的Up主带来更大的便利。
“剪掉”数据线,Meta Quest现已支持WiFi无线投屏未裁剪影像

微软Office办公软件登陆Meta Quest,支持透视背景及键盘鼠标

微软和Metaz兑现了在Connect大会上的承诺,将包括Word、Excel和PowerPoint在内的Office套件引入Quest Store。目前,Microsoft Word、Microsoft Excel和Microsoft PowerPoint都可以免费下载,并且支持Quest、Quest 2、Quest 3和Quest Pro设备。这些办公软件还支持MR背景,并允许用户使用蓝牙键盘和鼠标进行操作。需要注意的是,使用这些应用程序需要用户登录微软账户,但每个应用程序的文件大小都很小,约为1.3MB,因为它们都在云端运行。同时,用户可以通过Quest UI底部通用菜单栏的图标在多个应用之间进行多任务处理。除了支持触控操作外,这三个应用程序还兼容蓝牙键盘和鼠标,以及MR透视背景,用户可以像在常规办公中一样使用Office,并享受虚拟大屏和虚拟多屏的优势。
微软Office办公软件登陆Meta Quest,支持透视背景及键盘鼠标

Quest 3附赠游戏《Asgard’s Wrath 2》发行,售价59.99美元

《Asgard's Wrath 2》已于12月15日在Meta Quest 3、Meta Quest 2和Meta Quest Pro上正式发布,售价为59.99美元。这款独立的VR动作冒险RPG游戏是《Asgard's Wrath》的续作,采用了新的故事情节和游戏机制。游戏中,玩家需要扮演宇宙守护者,使用全新的力量找到洛基并挫败他的邪恶计划。游戏提供了宏大而复杂的游戏体验,包括60小时的主要故事模式和无限重玩的“Uncharted Rifts”模式,以及探索寺庙、洞穴、绿洲等广阔环境的时间。游戏的战斗系统基于物理,玩家可以选择不同的攻击方式削弱敌人护盾或发起致命一击。此外,游戏还引入了由AI驱动的同伴,玩家可以与他们并肩作战,并通过完成任务和击败敌人获得经验值来解锁额外能力。游戏还包含“Uncharted Rifts”模式和多种消遣活动,以提供无尽的可重玩性。
Quest 3附赠游戏《Asgard’s Wrath 2》发行,售价59.99美元

索尼VR专利提出足部操作控制器,坐着用脚操纵球体进行移动

索尼正在探索一种有趣的移动机制,即坐着并用脚操纵一个球体。他们认为VR和AR正成为越来越受欢迎的家庭娱乐媒介,但现有的控制方式仅限于房间规模的移动站立或就坐姿控制。这种房间规模的移动控制存在限制,小房间的用户无法充分利用,且对区域大小有硬性限制。为了解决这个问题,索尼提出了一种双脚操作控制器,为手部使用受限的用户提供了新的控制选择。这个足部操作控制器的专利申请中,用户以坐姿,用脚操纵一个放置在四方体内的滚动式球体。球体内有三个或更多个轴承,球体本身具有足够的重量和旋转惯性,提供自然和直观的感觉。通过在轴上附着磁铁和感应线圈,可以检测轴的旋转位移,并用以确定用户的Avatar的移动。虽然这只是一个专利,目前无法确定实际效果和体验,但这个发明给了社区一个有趣的创意。
索尼VR专利提出足部操作控制器,坐着用脚操纵球体进行移动

微软专利为AR/VR远程会议提供“讲话人”视觉指示器自动化系统

远程会议的发展正在推动元宇宙的普及。然而,当前在线会议应用在使用元环境时存在一个主要问题,即会议参与者可能难以识别正在讲话的人员。为解决这个问题,微软提出了一项名为“Automation of visual indicators for distinguishing active speakers of users displayed as three-dimensional representations”的专利申请。该专利申请介绍了一种用于区分活跃说话者或显示为三维表示用户的视觉指示器自动化系统。系统根据语音速率、音量、使用的术语等因素排名说话者队列,并选择在第二区域内显示活跃说话者的用户的个人效果图。系统还可以分析音频信号确定语音速率,并根据设定的标准显示或移除用户的图像。此外,系统可以根据用户界面、触发输入和虚拟摄像头的位置和方向进行用户界面转换,以提供更好的用户体验。该专利申请于2022年提交,并最近由美国专利商标局公布。需要注意的是,专利申请公布不代表专利获批,还需要经过实际审查。
微软专利为AR/VR远程会议提供“讲话人”视觉指示器自动化系统

Khronos将提高OpenUSD与glTF之间的一致性和互操作性

OpenUSD联盟宣布了未来两年的发展路线图,并宣布Meta、Unity、Epic Games等公司加入该联盟。该联盟还与Khronos建立了新的联系,并将努力提高OpenUSD与Khronos的glTF之间的一致性和互操作性。OpenUSD用于高级3D场景构图和创作,而Khronos的glTF是广泛采用的3D asset开放标准,用于高效地交付和加载3D场景。合作将协调OpenUSD和glTF的路线图,避免不兼容性,并实现两种技术之间的互操作。该合作框架的目标是促进双方的优势,并改进3D技术的采用,降低开发和分销成本,提高互操作性开发的速度和效率。这次合作是减少障碍,促进3D内容生态系统密切集成的战略努力,对于开放标准和开源社区都有好处。OpenUSD联盟和Khronos的领导层对合作表示兴奋,相信该合作将彻底改变3D内容创作和触达受众的方式。合作将简化OpenUSD和glTF的综合使用,为开发人员和用户提供更集成和用户友好的体验。OpenUSD联盟和Khronos之间的联系标志着共享未来的承诺,以实现无缝的3D内容创建和分发,让开发人员和用户都能充分利用3D和空间计算的潜力。
Khronos将提高OpenUSD与glTF之间的一致性和互操作性

Meta发布《Demeter》混合现实游戏,用你的家具、墙壁作为谜题挑战

Meta于2023年12月15日发布了一款名为《Demeter》的混合现实平台游戏。该游戏的主要特点是使用玩家的家具和墙壁作为谜题和挑战的要素,要求玩家引导一个小英雄回到她的世界。《Demeter》由Novelab开发,Meta发行,并计划于2024年1月在Quest 2/3/Pro上上线。该游戏不仅提供了一个私密背景来展开游戏叙事,还带来了适应玩家房间的程序生成环境,这在目前的大多数混合现实游戏中并不常见。Novelab表示,这种生成环境允许玩家应对适应环境的实时关卡和挑战,并在探索游戏故事的同时利用墙壁和家具进行攀爬、跳跃、飞行和奔跑。Novelab称,《Demeter》是史上第一次人类能够与一个适应并对其实际物理环境做出反应的微型幻想世界互动和娱乐。该游戏将于2024年1月25日在Quest Store上架,售价为20美元。
Meta发布《Demeter》混合现实游戏,用你的家具、墙壁作为谜题挑战

《Cooking Simulator VR》登陆PSVR 2,曾获2021年Steam年度最佳VR游戏

索尼宣布获得2021年Steam年度最佳VR游戏奖并入选Quest Store年度榜单的《Cooking Simulator VR》将于美国当地时间12月15日在PSVR 2上上线。虽然尚未公布具体售价,但该游戏在Steam上标价80元人民币。《Cooking Simulator VR》提供逼真的厨房模拟体验,拥有超过120种食材,并允许玩家在细致逼真的厨房中解锁并掌握各种食谱,烹饪出色香味俱全的完美菜肴。游戏强调综合协调能力,玩家需要适应各种特殊条件,完成切菜、搅碎、烹饪和调味等全过程。同时,玩家需要根据顾客的订单烹煮出美味菜肴,并以餐厅特色的风格上菜,速度也很关键。玩家需要快速服务顾客,保持顾客的满意度,获得好评。《Cooking Simulator VR》将于12月15日在PSVR 2上线。
《Cooking Simulator VR》登陆PSVR 2,曾获2021年Steam年度最佳VR游戏