Nweon

剑桥大学衍生公司Porotech已与鸿海（富士康）签署战略合作伙伴关系，旨在加快Micro LED技术在增强现实（AR）设备中的研究和产品化。鸿海（富士康）的供应链管理优势将在产品量产阶段发挥作用，以建立完整的端到端、可行的供应链。鸿海（富士康）此前已投资布局一系列的XR企业，并与Dispelix等厂商建立合作关系。著名消息人士郭明錤曾透露，苹果的第二代XR头显将由鸿海（富士康）开发和生产，预计将于2025年推出。Porotech的技术有望解决基于Mirco LED的显示器制造和成本问题，为AR设备提供亮度、效率和尺寸的结合显示技术。通过联手合作，双方希望将Micro LED技术推向一个新时代。鸿海（富士康）表示，Micro LED在增强现实方面具有巨大潜力但有挑战性，需要整合多个学科的专业知识。Porotech则表示与鸿海（富士康）的合作标志着Micro LED显示器和AR的重要进步。

Vision Pro的开发者发布了一段视频，展示了苹果头显的手部追踪和遮挡性能。Vision Pro将在2024年1月发布，使用手控作为主要的输入方法。系统级交互结合了手+眼追踪，但开发者可以构建允许用户直接使用双手与应用程序交互的应用程序。手部追踪功能包括估计手部、关节和指尖位置的3D模型，用于判断何时触摸、抓取和交互对象。手部遮挡处理系统将真实的手剪切出来显示在场景中，增加了虚拟内容的真实感。Unity开发者发布的视频清晰地展示了手部追踪和遮挡效果，但有一些剪切伪影和延迟问题。尽管还存在一些与Unity相关的因素，考虑到Vision Pro还在开发中，预计在设备亮相时会有更多的改进。

IDC近日发布的数据显示，尽管今年市场推出了全新的产品，但全球AR/VR头显的出货量预计在2023年同比下降8.3%至810万台。家庭的宏观经济压力加上商业领域的支出放缓阻碍了增长。然而，2024年将成为复苏的一年，AR/VR头显的出货量预计将增长46.4%。 对于2024年的增长，这要归功于Meta Quest 3和苹果Vision Pro，其中IDC预计苹果的头显设备将会引起大量的关注，但年内出货量可能不到20万。相比之下，Meta在2023年前三个季度的出货量已经超过了苹果预期出货量的10倍，并且很可能在2024年实现同比增长。 IDC表示，随着平均销售价格趋势上升，新款VR头显有可能望而却步。高端头显可能会定位为企业设备，而Quest 3同样可能使消费者望而却步。另一方面，由于Xreal和Rokid等公司推出了成本更低的系留头显产品，增强现实头显预计将在2024年实现增长。 总的来说，AR头显的销量增长速度预计会较慢，但多样化的产品将满足更多需求，3D沉浸式和交互式增强现实仍然是重点关注领域。辅助现实技术同样将有自己的受众，可以扩展到游戏和多媒体用户。最后，对混合现实的关注将提高增强现实的知名度，特别是对那些只想要或需要增强现实体验的人来说。

索尼每年都会邀请玩家投票选出PlayStation Blog Game of the Year。今年，《生化危机8：VR模式》成功击败了《地平线：山之呼唤》、《Nock》和《星球大战：银河边缘的传说》，夺得了2023年度PSVR的两个奖项。在VR游戏领域，卡普空的《生化危机》系列一直都是非常受欢迎的。在今年的游戏盛典《TGA》上，它们的作品《生化危机7》、《生化危机4 VR》和《生化危机8：VR模式》分别夺得了2017年、2021年和2023年的最佳AR/VR游戏奖。虽然在PSVR 2社区中，《生化危机8：VR模式》仍然是热门作品，但在实际投票开始之前，社区认为今年的竞争有一定的悬念。然而，《生化危机8：VR模式》最终还是凭借其多样化的体验和恐怖氛围赢得了大多数选票。游戏将通过PSVR 2让玩家身临其境地感受恐怖世界，其中的可视效果和细节都非常逼真。此外，《生化危机4》由于在12月8日才登陆PSVR 2，因此没有参选。然而，根据卡普空的数据，PSVR 2版本的《生化危机4》已经吸引了近5万名玩家。最后，今年的PSVR 2大奖排名依次是《生化危机8：VR模式》，《地平线：山之呼唤》，《Nock》，《星球大战：银河边缘的传说》。

根据映维网Nweon的报道，苹果一直更加钟情于增强现实（AR）而非虚拟现实（VR），因此在公开发言、主题演讲和技术文档中避免使用"VR/虚拟现实"和"元宇宙"等术语，而更多选择使用"空间计算"或"完全沉浸式体验"等名词描述相关技术。根据社区情报，据称苹果计划在2024年1月中旬开始进行Vision Pro零售员工培训，而在培训中将强调禁止使用"VR"等名词。此外，苹果零售店已为Vision Pro做好准备，培训活动旨在向零售员工介绍Vision Pro设备以及相关的销售流程和技巧。据知名XR消息人士布拉德·林奇透露，苹果严禁员工使用"VR"等名词，而希望他们传达给消费者的印象更多是"神奇"和"全新"的。苹果首席执行官库克以前在被问及AR/VR问题时通常只选择回答AR而避谈VR，并且即便提到VR也会强调AR才是未来趋势，同时也避免卷入"元宇宙"的概念。

Meta在Connect大会发布了MR Utility Kit，这是一个实用工具套件，可用于Unity和Unreal引擎。该套件提供了各种功能，如Passthrough Rellighting，可以帮助加快开发并增强应用程序的真实感。MRUK是一个引擎级的实用工具集合，可以帮助开发者更快地构建空间感知应用程序，并减少编写样板代码的数量。Meta表示他们将使用MRUK来加速MR API的开发，并计划将其扩展到其他MR API。MRUK包含了各种功能和工具，例如场景查询、图形助手和其他开发工具，可以改进应用程序的构建过程。其中一个令人兴奋的新功能是PTRL，它可以简化添加阴影和高光的过程。为了构建沉浸式混合现实体验，将虚拟对象的阴影和高光投射到现实世界表面非常重要。Meta为开发者提供了可重用的组件、示例、文档和设计指南，以简化调整现实世界照明以匹配虚拟世界元素的过程。Meta表示，这些可重用组件将帮助开发者节省时间和资源，并提供全面的技术文档和设计指南来支持高质量用户体验的开发。他们还承诺将继续提供各种工具，以加速开发使用混合现实技术的过程。

眼动追踪是一种非侵入性检测眼睛位置、方向和运动的方法，可以使用光学探测器或传感器来追踪眼睛。V社的专利申请介绍了一种使用成像的角度敏感探测器的光学眼动追踪方法。每个眼动追踪组件包括光探测器和光源，可以定位于头显设备的不同位置，用于确定用户注视方向。光学探测器包括象限光电探测器和成像透镜，可以通过电表征来确定眼睛位置信息。此外，通过使用多个眼动追踪组件，可以更准确地确定用户的凝视位置。专利中还介绍了使用机器学习技术支持眼动追踪的示例。这项名为“Optical tracking including imaging-based angle sensitive detectors”的专利申请最初于2023年5月提交，并由美国专利商标局公布。需要注意的是，专利申请公布并不意味着专利获批，且专利申请后还需要进行实际审查。

Meta最近发布了Avatars SDK v24，引入了新的技术基础，并提供了视觉增强、扩展自定义支持、性能改进和Unity Asset Store支持。在v24中，Meta重新审视了支持Avatar SDK的核心系统，这将使Meta能够在不给应用程序带来重大破坏风险的情况下提供未来的改进。Meta已经重建了核心系统，围绕rig abstraction而不是具体的rig，这将使团队能够更快地改善Avatar的视觉效果而不会破坏应用程序。引入这项新技术后，Meta将放弃对legacy character rig的支持，并将在2024年公布更多关于弃用时间表的信息。除了引入一个全新的character rig，v24还提供了一系列改进，包括视觉增强、扩展自定义支持和性能改进等。此外，SDK v24是通过Unity Asset Store下载Meta Avatars SDK的第一个版本，这将为现有开发者更新到未来版本的SDK提供便利，并为新开发者首次将Meta Avatar SDK集成到应用程序中提供便利。

英国研究人员设计了一个名为HotGestures的新系统，允许用户通过快速手势在虚拟环境中进行创建和设计操作。该系统通过头显的手部追踪器持续接收用户手指和双手的运动，并使用人工智能评估手部运动，预测用户想要的工具。研究结果显示，对于大多数操作，手势模式比菜单选择模式更快，特别是对于笔、立方体、球体和复制操作。然而，调查结果还显示，参与者认为使用手势的方法更快但更费力，而且比菜单选择更不准确，可能是因为参与者不熟悉使用手势进行3D建模。在实验中，有14人更喜欢使用混合解决方案，而只有两名参与者更喜欢只使用HotGestures。研究人员免费提供了HotGestures的源代码和数据，希望这可以成为在虚拟现实和增强现实中使用虚拟工具的一种标准方式。

微软宣布为Azure Remote Rendering引入了Point Cloud Streaming功能。Azure Remote Rendering是微软的一项服务，允许开发者实时渲染高质量的交互式3D内容，并将其流式传输到HoloLens 2和Meta Quest等设备。新增的Point Cloud Streaming功能将大大提高点云渲染能力和用户体验。以前，用户必须等待整个模型从远程存储下载后才能渲染，而现在可以几乎即时可视化高达125亿个点的点云文件。点云文件的流式传输将成为默认行为。微软与Roboverse Reply和Augment IT等合作伙伴进行了密切合作开发和测试。据合作伙伴表示，Point Cloud Streaming为可视化和实时交互带来了全新的可能性，并为各种设备的数字孪生场景提供了庞大的数据集。微软表示期待看到开发者如何利用这个新功能。