Nweon

英国研究人员设计了一个名为HotGestures的新系统，允许用户通过快速手势在虚拟环境中进行创建和设计操作。该系统通过头显的手部追踪器持续接收用户手指和双手的运动，并使用人工智能评估手部运动，预测用户想要的工具。研究结果显示，对于大多数操作，手势模式比菜单选择模式更快，特别是对于笔、立方体、球体和复制操作。然而，调查结果还显示，参与者认为使用手势的方法更快但更费力，而且比菜单选择更不准确，可能是因为参与者不熟悉使用手势进行3D建模。在实验中，有14人更喜欢使用混合解决方案，而只有两名参与者更喜欢只使用HotGestures。研究人员免费提供了HotGestures的源代码和数据，希望这可以成为在虚拟现实和增强现实中使用虚拟工具的一种标准方式。

微软宣布为Azure Remote Rendering引入了Point Cloud Streaming功能。Azure Remote Rendering是微软的一项服务，允许开发者实时渲染高质量的交互式3D内容，并将其流式传输到HoloLens 2和Meta Quest等设备。新增的Point Cloud Streaming功能将大大提高点云渲染能力和用户体验。以前，用户必须等待整个模型从远程存储下载后才能渲染，而现在可以几乎即时可视化高达125亿个点的点云文件。点云文件的流式传输将成为默认行为。微软与Roboverse Reply和Augment IT等合作伙伴进行了密切合作开发和测试。据合作伙伴表示，Point Cloud Streaming为可视化和实时交互带来了全新的可能性，并为各种设备的数字孪生场景提供了庞大的数据集。微软表示期待看到开发者如何利用这个新功能。

名为LukeRoss的VR Mod制作人表示，他正在制作《孤岛惊魂5》的VR Mod，并将很快与大家见面。LukeRoss以为《赛博朋克2077》、《艾尔登法环》和《侠盗猎车手5》等游戏制作高质量的VR Mod而闻名于VR社区。他的作品使粉丝能够以身临其境的第一人称视角感受游戏的世界。此前，LukeRoss的VR Mod受到社区的欢迎，并帮助他赚取了高额收入，月赚2万美元。然而，R星母公司Take-Two Interactive发出了版权保护传票，要求他下架为《侠盗猎车手5》、《荒野大镖客2》和“黑手党123”制作的VR Mod。目前，LukeRoss开始专注于制作育碧的《孤岛惊魂》系列的VR Mod。《孤岛惊魂5》的故事发生在美国蒙大拿州的希望郡，玩家将扮演郡警与抵抗势力一同对抗邪教组织“伊甸之门”，并帮助希望郡的人民和教团战斗以夺回希望郡。对于VR Mod，玩家将能够以沉浸式视角体验游戏的故事，并完成一系列挑战。感兴趣的玩家可以通过Patreon页面支持并获取《孤岛惊魂5》的VR Mod。

Meta在最新的v60 SDK中发布了一个包含检测舌头伸出的新版本面部追踪OpenXR扩展。尽管Meta Avatars SDK尚未纳入这个功能，但第三方的Avatar解决方案已经可以通过OpenXR扩展来支持舌头伸出检测。来自用户“コレヂャン”的演示通过全新的VRCFT模块展示了这个功能。Meta一直在积极优化眼动追踪和面部追踪，并在2022年11月发布了多个演示应用，展示眼动追踪和面部追踪的性能效果。尽管相关演示展示了相当出色的面部和眼部动作，但系统一直无法支持舌头动作。然而，随着v60 SDK的发布，Avatar将能够实现吐舌头等动作。虽然Meta Avatars SDK尚未支持这个功能，但第三方的Avatar解决方案已经可以通过OpenXR扩展来支持舌头伸出检测。例如，开发者korejan为ALXR纳入了Meta提供的舌头伸出检测功能。新版本的VRCFT可以通过名为VDX的应用程序支持Air Link和Virtual Desktop。

Meta Quest Store已经开始了今年的“Holiday Sale”节日大促活动，持续到2024年1月2日。参与特卖的175+款内容中，诸如《刺客信条：联结核心VR》、《生化危机4》、《Vampire: The Masquerade – Justice》、《Among Us VR》等备受社区欢迎的作品都有参加，幅度最高可达60%。此外，Meta还提供了多种优惠捆绑套餐选择。需要注意的是，未登录的常规页面不会显示任何折扣，需要登录后才能看到优惠。 同时，Steam平台的冬季特卖活动将于12月22日凌晨2点开始，1月5日凌晨2点结束。

三星电子发布了两款新的ISOCELL影像传感器，分别命名为ISOCELL Vizion 63D和ISOCELL Vizion 931，专为XR和机器人设计。三星表示，这两款传感器采用先进的技术，对于未来的高科技应用如XR和机器人至关重要。ISOCELL Vizion 63D是一款iToF传感器，能够捕捉高分辨率的3D图像。它使用间接飞行时间技术，通过检测发射和反射光束之间的相位差来感知周围的三维环境。这款传感器具备出色的准确度和清晰度，非常适合服务业和工业机器人，以及需要高分辨率和精确深度检测的XR设备。ISOCELL Vizion 931是一款全局快门传感器，能够捕捉清晰而不失真的移动中的物体图像。与卷帘快门传感器不同，它以“全局”的方式一次性捕捉整个场景，适用于动作追踪的XR设备等应用。这两款传感器已经提供样品给全球OEM厂商。

扩展现实设备可以通过摄像头来检测、追踪和识别对象。对象检测可用于检测或识别图像或帧中的对象，并且可以执行对象追踪，以便随时间追踪检测到的对象。同时，可以执行图像分割来检测帧中的多个片段，对其进行分析和处理以执行所需的图像处理任务或生成所需的图像效果。现有的场景分割和目标追踪解决方案存在局限性，例如局部搜索依赖于前一帧的预测，对象检测受到可检测类的限制，使用两个模型会增加计算成本。高通提出了一种联合场景分割和一次性长期对象追踪的方法。该方法利用语义场景分割的特征在多个帧对一个或多个目标对象执行对象追踪，实现实时视频分割和追踪。通过使用一个神经网络进行语义分割和特征提取，以及融合特征和交叉注意执行全局搜索，该技术提供了一种高效的多任务解决方案，减少了计算成本。场景分割和对象追踪系统包括语义提取引擎、特征存储器、交叉注意引擎和预测引擎。这种系统可以处理帧序列中的目标对象执行追踪。

《映维网Nweon》网站于2023年12月19日发表了一篇关于苹果公司专利申请的文章。这个专利申请名为“Smart interactivity for scanned objects using affordance regions”，介绍了一种用于增强用户交互表示的技术。该技术可以通过扫描现实世界的对象并创建虚拟对象，为每个对象类型创建3D规范对象表示，并使用对象-用户交互注释创建功能区域。功能区域可以表示对象类型的通用版本的形状，以指示与用户接触的可能性。通过在特定用户交互的特定对象类型的对象之间执行对应映射，可以生成对象类型的可用区域。在用户与物理对象之间检测到物理接触或交互时，可以呈现与虚拟对象的表示交互的用户的表示，以提供更真实的交互体验。文章中还提到了相关的专利申请信息。

VR硬件和软件解决方案供应商大朋VR宣布与专注于沉浸式教育内容的SchooVR建立战略合作伙伴关系，旨在为课堂带来实用和引人入胜的虚拟现实体验。通过将VR融入课堂，他们希望增强传统的教学方法，为学生提供更加身临其境和动态的学习体验。合作将为教师和学生带来以下好处：1）学生能够通过教育者创建的不同课程体验；2）教育工作者能够定制自己的沉浸式内容，根据自己的教学风格和课堂需求进行定制；3）提供定制的轻量级头显和教育内容的一体化解决方案，简化VR与教室的整合。此外，合作还提供了内容库探索、资源分配、SchooVR Tour Creator内容创建器和小组学习等关键功能。双方对合作充满信心，认为这将为学生提供难忘的学习冒险并培养对多样化星球的深刻理解，同时推动沉浸式学习的界限，打开未来教育的大门。

VR WAVE是一家成立于2020年的公司，专注于提供定制光学配件，如光学插片。该公司最近发布了专门用于Meta Quest 3头显的定制光学插片，以满足需要视力矫正的用户的需求。这些光学插片定价为16美元，但圣诞促销价只需11美元。根据用户的视力参数进行精密加工定制，确保与头显完美兼容，并提供无失真的视觉体验。此外，这些插片配备防眩光和防蓝光功能，可以显著减少眼睛疲劳，提供更舒适和更长时间的VR体验。光学插片易于安装和拆卸，适合与他人共享头显。产品采用高品质的防刮材料制成，具有耐用性和使用寿命。VR WAVE致力于将功能性与舒适性相结合，插片与头显无缝集成，不会增加额外的重量或改变平衡。该公司表示，他们相信沉浸式虚拟现实应该让每个人都能够使用，他们为Meta Quest 3头显设计的光学插片可提供清晰的视觉效果和最大的舒适度，确保视力受损的用户完全参与虚拟现实世界。Meta Quest 3的定制光学插片已经开始销售，原价为16美元，但圣诞促销价为11美元。