Nweon

俄罗斯斯科尔科沃科学技术研究院提出了一个名为AirNeRF的系统，旨在通过神经辐射场（NeRF）和基于无人机的自动视频捕获方法，快速且准确地创建高质量的人体3D重建。该系统利用了rigged网格来实现动态人类自由视角合成，适用于虚拟现实中的沉浸式体验。与传统的摄影测量方法相比，该系统具有较高的重建质量和更短的安装时间，并且适用于不均匀表面和具有纹理变化、反射和透明物体的场景。该方法需要支持NeRF训练的GPU、无人机和至少2×2米的开放空间。AirNeRF的目标是实现个性化的数字Avatar，以增强虚拟现实环境中的交互。该系统利用无人机捕获视觉数据，并通过精确的定位技术提高三维Avatar重建的准确性。NeRFacto是在系统中使用的NeRF模型，具有快速处理时间和高质量重建结果的优点。最终生成的Avatar可用于现代3D引擎，并且具有逼真的外观和正确的比例，可用于增强VR/AR领域的用户体验。

初创公司Surreal Interactive开发了一款名为Surreal Touch的第三方控制器，用于支持用户在Apple Vision Pro上畅玩PC VR游戏。首批产品已经开始发货给Kickstarter的支持者，其中包括XR行业专家泽加米。与Meta的Touch Pro控制器类似，Surreal Touch使用机载摄像头进行追踪，并将其报告给头显。控制器将推出一个SDK，允许开发者构建直接支持控制器的应用程序，并且可在Windows上使用软件将PC VR内容串流到Apple Vision Pro。尽管控制器的软件体验令人印象深刻，但实际追踪质量存在一些问题，包括位置精度不够准确。虽然控制器的构建质量和手感被称赞，但也存在一些细节问题。控制器的追踪质量适合手速较慢的游戏，但对于需要快速动作的游戏可能会令玩家感到沮丧。Surreal Touch的价格为300美元，泽加米认为对于想要在Apple Vision Pro上畅玩PC VR游戏的用户来说是值得购买的产品。

面部动画是VR真实感的重要条件，Avatar动画需要高效和准确地捕获表情，并保持自然对话的节奏。Meta提出了一种通过消费者VR头显的摄像头实时动画化逼真Avatar的方法。他们采用了基于交叉视图重建目标的自监督学习方法，并提出了轻量级的表情校准机制来提高准确性和降低运行时效率。此外，他们还提出了改进的参数化方法以生成精确的ground truth值，并提供对环境变化的鲁棒性。Meta的目标是建立一个使用逼真Avatar模拟面对面对话的VR呼叫服务，最根本的挑战是以普遍的方式将失真、延迟和干扰最小化，并适应人类多样性和各种环境。他们的研究结果表明，所提出的方法在定量和定性方面都取得了显著改进，能够捕获极端和微妙的表情变化，并对特定的非分布输入变化具有鲁棒性。团队提出了一个通用的、准确的、实时的通用面部编码解决方案，适用于现有的消费者VR头显，并明显优于任何先前的方法。

VR侦探体验游戏《Detective VR》将于2月27日发行。游戏承诺提供3个故事和8个角色，游戏时间为4-6个小时。开发团队已在Meta Quest Store发布了相关的演示版本。在《Detective VR》中，玩家可以控制时间、收集线索和采访证人，通过细微的观察和套取的证人证词来揭露真相。完整的游戏提供了4-6个小时的游戏时间，包括三个故事和8个角色。玩家可以像名侦探柯南或福尔摩斯一样行事，并在引人入胜的真相调查过程中享受侦探的乐趣。此外，该作品以MR作为特色，根据房间的布局生成相应的场景。有关游戏的演示版本可在Meta Quest Store上获取。

VR游戏开发商和发行商Quell Tech的沉浸式健身游戏《Shardfall: Fit Quest VR》近日正式登陆Meta Quest Store。这款游戏通过全身、个性化的锻炼来挑战玩家，让他们挥舞拳头为世界的命运而战，克服心跳加速的挑战，燃烧卡路里。故事背景设置在一个机器正在蹂躏的世界中，玩家需要击败各种敌人来恢复自然平衡。游戏中的锻炼方式非常独特，玩家需要大幅活动身体来击败敌人并燃烧脂肪。游戏包含战斗和奔跑两种锻炼方式，玩家需要用有力的拳头对抗敌人，通过闪避和阻挡来避开攻击。同时还可以奔跑躲避障碍物，在跑步时收集魔法球增加愤怒值。游戏还提供跟踪进步和快速训练等功能，玩家可以通过分析和个性化提示来跟踪自己的进步，调整训练的长度、难度和类型来适应健身目标。

AR波导眼镜厂商Vuzix与广达合作研发了两个眼镜参考设计：Ultralite Pro OEM和Ultralite Audio OEM。Ultralite Pro OEM搭载高通骁龙AR1 Gen 1平台，结合了双全彩Avegant LCoS投影仪和超薄双眼波导光学器件，提供生动的3D增强现实体验。该设备集成了声控命令、板载摄像头和强大的麦克风阵列，可实现直观的控制和实时照片和视频捕获。Ultralite Audio OEM基于Ultralite Z100，集成了双扬声器和降噪麦克风以增强音频和语音交互，搭载单色Micro LED投影仪，续航时间长达两天。 Vuzix正在CES大会上展示Ultralite Pro OEM和Ultralite Audio OEM，以及最新的波导技术进展，包括全彩色1.0mm轻薄波导和为ODM/OEM需求量身定制的其他设计。这些波导旨在支持尖端的人工智能应用，具有单眼和双目配置，视场范围从30到40度，并集成了Vuzix专有的隐形技术，可用于精细的高性能AR显示。 Vuzix首席执行官保罗·特拉维尔斯表示，Vuzix的产品和技术在性能、可扩展性和成本效益方面树立了基准，吸引了广达等合作伙伴，可以为ODM/OEM合作伙伴提供创新解决方案并帮助塑造行业。

全息技术厂商Ceres Holographics近日宣布与智能驾驶舱汽车产品供应商Appotronics达成合作，共同为下一代车辆提供高分辨率的车载全息显示解决方案。这次合作利用了Ceres Holographics的HoloFlekt制造技术和Appotronics的先进激光投影系统，以满足汽车市场对尺寸、可靠性和成本的要求。Ceres Holographics表示，这是一个独特的优势组合，将商用汽车级投影技术和全息制造能力结合在一起，加速先进透明显示解决方案的采用。公司的HoloFlekt薄膜技术可实现大幅面、透明的显示区域，将嵌入挡风玻璃，并配备高分辨率的Appotronics投影仪。据称，HoloFlekt薄膜技术可以将任何玻璃结构转变为超亮的全彩全息显示屏，以清晰、不分散注意力的方式直接显示安全、操作、导航和信息娱乐内容给车内人员，不受外部光线条件的影响。

索尼发布了全新的mocopi Pro Kit，这是索尼扩展现实解决方案品牌XYN的一部分。该套件搭载了特殊的12个传感器，可以以高精度进行全身动捕，提供准确性和灵活性，专为专业XR创作者设计。这个套件可以追踪头部、臀部、手腕、脚踝、手臂、大腿和手或脚的动作，并通过实时低功耗蓝牙和mocopi传感器数据接收器的直接PC集成实现支持专业工作流程。索尼表示，他们推出mocopi Pro Kit的目标是为创作者提供消除创造力障碍的工具，并将mocopi硬件产品的改进与提供强大编辑功能的新软件相结合，使创作者能够更轻松、更准确地实现更雄心勃勃的项目。该套件将于2025年3月底开始接受预订，建议零售价为1180美元。mocopi传感器数据接收器的售价约为110美元，XYN Motion Studio的订阅价格约为8.99美元/月。

苹果推送了visionOS 2的第二个beta版本，版本号为22N5881d。开发者可以在设备端的设置应用中选择“开发者测试版”开关并进行下载。苹果建议在安装新软件前进行备份。开发者还可以在Xcode的visionOS模拟器中尝试新版本的visionOS系统。

近日，英伟达在CES 2025大会中宣布了基于模仿学习的人形机器人训练模式--GR00T Blueprint。通过苹果的Vision Pro技术，用户可以为机器人创建数字孪生，并让机器人在模拟中学习复制人类行为。此外，英伟达还发布了一系列机器人基础模型、数据管道和仿真框架，用于加速下一代仿人机器人的开发。模仿学习是机器人学习的一个子集，它允许机器人通过观察和模仿人类专家的示范来学习新技能。GR00T Blueprint的工作流程包括GR00T-Teleop、GR00T-Mimic和GR00T-Gen，通过这些工作流程，开发者可以轻松生成合成数据集。这些数据集可以用作机器人策略的输入，并在英伟达的Isaac Lab中教导机器人如何移动和与环境交互。此外，英伟达还宣布了Cosmos平台，用于生成物理感知视频和物理人工智能开发的世界状态。通过结合Omniverse和Cosmos，可以实现高度可控、物理精确的模拟，帮助减少世界模型相关的潜在幻觉。