Vision Pro的开发者发布了一段视频，展示了苹果头显的手部追踪和遮挡性能。Vision Pro将在2024年1月发布，使用手控作为主要的输入方法。系统级交互结合了手+眼追踪，但开发者可以构建允许用户直接使用双手与应用程序交互的应用程序。手部追踪功能包括估计手部、关节和指尖位置的3D模型，用于判断何时触摸、抓取和交互对象。手部遮挡处理系统将真实的手剪切出来显示在场景中，增加了虚拟内容的真实感。Unity开发者发布的视频清晰地展示了手部追踪和遮挡效果，但有一些剪切伪影和延迟问题。尽管还存在一些与Unity相关的因素，考虑到Vision Pro还在开发中，预计在设备亮相时会有更多的改进。

IDC近日发布的数据显示，尽管今年市场推出了全新的产品，但全球AR/VR头显的出货量预计在2023年同比下降8.3%至810万台。家庭的宏观经济压力加上商业领域的支出放缓阻碍了增长。然而，2024年将成为复苏的一年，AR/VR头显的出货量预计将增长46.4%。 对于2024年的增长，这要归功于Meta Quest 3和苹果Vision Pro，其中IDC预计苹果的头显设备将会引起大量的关注，但年内出货量可能不到20万。相比之下，Meta在2023年前三个季度的出货量已经超过了苹果预期出货量的10倍，并且很可能在2024年实现同比增长。 IDC表示，随着平均销售价格趋势上升，新款VR头显有可能望而却步。高端头显可能会定位为企业设备，而Quest 3同样可能使消费者望而却步。另一方面，由于Xreal和Rokid等公司推出了成本更低的系留头显产品，增强现实头显预计将在2024年实现增长。 总的来说，AR头显的销量增长速度预计会较慢，但多样化的产品将满足更多需求，3D沉浸式和交互式增强现实仍然是重点关注领域。辅助现实技术同样将有自己的受众，可以扩展到游戏和多媒体用户。最后，对混合现实的关注将提高增强现实的知名度，特别是对那些只想要或需要增强现实体验的人来说。

索尼每年都会邀请玩家投票选出PlayStation Blog Game of the Year。今年，《生化危机8：VR模式》成功击败了《地平线：山之呼唤》、《Nock》和《星球大战：银河边缘的传说》，夺得了2023年度PSVR的两个奖项。在VR游戏领域，卡普空的《生化危机》系列一直都是非常受欢迎的。在今年的游戏盛典《TGA》上，它们的作品《生化危机7》、《生化危机4 VR》和《生化危机8：VR模式》分别夺得了2017年、2021年和2023年的最佳AR/VR游戏奖。虽然在PSVR 2社区中，《生化危机8：VR模式》仍然是热门作品，但在实际投票开始之前，社区认为今年的竞争有一定的悬念。然而，《生化危机8：VR模式》最终还是凭借其多样化的体验和恐怖氛围赢得了大多数选票。游戏将通过PSVR 2让玩家身临其境地感受恐怖世界，其中的可视效果和细节都非常逼真。此外，《生化危机4》由于在12月8日才登陆PSVR 2，因此没有参选。然而，根据卡普空的数据，PSVR 2版本的《生化危机4》已经吸引了近5万名玩家。最后，今年的PSVR 2大奖排名依次是《生化危机8：VR模式》，《地平线：山之呼唤》，《Nock》，《星球大战：银河边缘的传说》。

据Vision Pro开发者发布的一段视频显示，苹果新头盔具备手部追踪和遮挡功能。 苹果Vision Pro将使用手部追踪作为主要输入方式，实现手部和眼部追踪的交互。手部追踪能够估计手部的3D模型、关节和指尖位置，实现触摸、抓取和与物体交互。手部遮挡处理将真实手部与虚拟内容叠加，增加虚拟内容的逼真感。 视频显示，手部遮挡效果不错，但在完全被虚拟内容包围且快速移动时会出现剪切现象。此外，手部追踪位置相对于手部遮挡存在一定延迟，大约100-200毫秒。这可能是早期实验阶段的问题，因为其他开发者也报告了类似的延迟。 需要注意的是，视频是在Unity应用程序中展示的，性能和延迟可能存在与Unity相关的因素。另外，因为Vision Pro尚未上市且开发工具仍在完善中，预计头盔上市时可能会有进一步的改进。

根据映维网Nweon的报道，苹果一直更加钟情于增强现实（AR）而非虚拟现实（VR），因此在公开发言、主题演讲和技术文档中避免使用"VR/虚拟现实"和"元宇宙"等术语，而更多选择使用"空间计算"或"完全沉浸式体验"等名词描述相关技术。根据社区情报，据称苹果计划在2024年1月中旬开始进行Vision Pro零售员工培训，而在培训中将强调禁止使用"VR"等名词。此外，苹果零售店已为Vision Pro做好准备，培训活动旨在向零售员工介绍Vision Pro设备以及相关的销售流程和技巧。据知名XR消息人士布拉德·林奇透露，苹果严禁员工使用"VR"等名词，而希望他们传达给消费者的印象更多是"神奇"和"全新"的。苹果首席执行官库克以前在被问及AR/VR问题时通常只选择回答AR而避谈VR，并且即便提到VR也会强调AR才是未来趋势，同时也避免卷入"元宇宙"的概念。

Jeremie Passerin氏和Miquel Campos氏开发并公开的 Maya 用开源绑定框架更新版本「mGear 4.2」以及面向 Unreal Engine 的插件「ueGear 0.5 Beta」已在 Github 上公开。

苹果公司最近获得一项与未来智能眼镜相关的专利，涉及变形传感器的使用，以确保在跌落或温度变化等情况下，AR视觉效果保持对齐。该专利描述了头戴式设备的结构和运作原理，强调在外壳变形时，摄像头和显示系统的指向矢量可能会错位。通过传感器监测这些变形，控制电路可以实时调整图像输出，从而实现准确的立体视觉。该技术旨在提升用户体验，防止因设备变形导致的视觉不适和图像质量下降。

苹果Vision Pro利用手势识别技术操控visionOS，而谷歌和三星也在发展类似技术以竞争。三星推出的ISOCELL Vision 931全局快门传感器能清晰捕捉快速移动物体，并支持眼动追踪和面部表情识别。ISOCELL Vizion 63D则是一种高精度的间接ToF传感器，可以精准测量3D环境，适用于XR设备和面部识别，且功耗较前代产品降低40%。这些新传感器旨在提升用户体验，尤其是在XR领域。

美容零售商Beautyque NYC正在测试一款名为Beautyque Verse的虚拟现实应用，旨在为用户提供沉浸式的购物体验。该应用基于3D商店概念，结合人工智能和XR交互系统，实现个性化产品推荐和用户之间的互动。用户可在3D环境中探索、互动并购买超过20款带试穿功能的产品。当前测试版本已在iOS、Android和Oculus头显上推出，即将上线的WebXR版本将支持更多平台的使用。

Meta的CTO兼Reality Labs负责人Andrew Bosworth发布了关于2023年在人工智能和元宇宙领域进展的长文，展望未来发展。他指出，Meta在AI（如Llama）和混合现实（MR）技术方面的突破正在逐步显现，特别是在用户与机器互动的方式上。2024年将是重要的里程碑，Meta正致力于将这两项技术整合为产品，增强用户体验。此外，Meta正探索具身智能等新领域，以推动AI和MR的进一步发展，推动未来计算平台的实现。