Nweon

苹果提出了一种动态选择操作方式的方法，可以通过用户的姿势和握持方式动态改变物理对象的操作方式。该方法的一个实施例是通过追踪数据和其他输入确定物理对象的姿势和握持，使用户能够无缝地改变物理对象的操作方式，而不中断工作流程。该方法可以应用于XR体验设备，如控制器和电子设备，用于选择不同的操作模式，例如听写模式、标记模式、擦除模式等。基于用户输入向量和追踪数据来确定物理对象的特征向量，选择当前操作模式，并进行相应的操作。这项技术的专利申请于2022年7月提交，并由美国专利商标局公布。此技术的应用有望提升用户在XR环境中的操作体验。

微软提出了一种利用动态直方图匹配的色调映射技术，用于改善低对比度图像的显示。该技术通过生成与目标直方图匹配的图像直方图来进行色调映射。在实施中，系统通过对输入图像直方图应用平滑操作，生成目标直方图，以便在输出图像中提供更大对比度的连续像素值。生成的目标直方图可以用于将输入图像的像素值映射到输出图像的相应像素值，从而增强图像的可解释性。该技术还提出了使用多个输入图像的动态生成的目标直方图进行直方图匹配的方法。通过应用动态直方图匹配来执行色调映射，可以改善图像的对比度，尤其对于低对比度的图像特别有益。这项技术可以应用于XR系统中，对于提高图像显示质量具有重要意义。

研究人员提出了一种名为HeadShift的技术，它采用动态增益来改进头部指向的人体工学和精度。该技术以眼-头协调为基础，通过不同的速度控制视口和光标。实验结果显示，HeadShift可以减少错误率和工作量。 传统的头部指向存在一些缺点，如选择只能在显示中心进行，光标速度与头部旋转速度有关等。而HeadShift通过动态控制显示增益来解决这些问题，使光标由头部控制，但移动速度比头部快。 研究人员通过两项研究评估了HeadShift的性能和可用性，发现HeadShift的错误率较低，并能改善人体工学。 总的来说，HeadShift技术对于免手交互非常有吸引力，特别是对于内置头部追踪的头戴式显示器。该技术提高了输入精度，减少了用户努力，并改善了人体工程学。

近年来，三维手姿估计方法在虚拟现实等领域的应用受到广泛关注。然而，手部检测和重建仍然存在一些挑战，尤其是在构建有效的多手重建系统方面。为了解决这个问题，英国帝国理工学院和上海交通大学团队提出了一个数据驱动的管道。该管道由实时全卷积手部定位和高保真transformer-based三维手部重建模型两部分组成。为了建立一个鲁棒且稳定的检测网络，团队引入了一个大型数据集，其中包含超过2M张具有不同照明、照明和遮挡条件的手部图像。该方法在效率和准确性方面优于以前的方法。手部检测和重建的研究一直是一个长期的问题，尤其在处理in-the-wild图像时更具挑战性。通过引入一个鲁棒的单状态无锚点检测器，团队提出了一个鲁棒的手部检测方法，其运行速度超过每秒100帧（fps）。另外，研究人员还提出了一个高保真的3D手部姿态估计方法，该方法可以在FreiHand和HO3D基准数据集上实现更好的图像对齐和性能。整体而言，这个研究提出了一个全栈手部检测和3D姿态估计框架，并在不同遮挡和光照条件下稳健地检测手部。

卡马克之前对Meta（前Facebook）的战略方向提出了担忧，指出其过分强调混合现实（MR），而不是创造有价值的应用。他认为MR应该是AR世界的基石，但不能成为主流体验。卡马克指出，开发者应该选择改变设计以获得良好用户体验，而不是仅仅制作MR应用。对此，Meta首席技术官博斯沃思回应称，他们现在使用MR来统称MR/VR。然而，许多开发者对这样的描述感到困惑，无法确定Meta是在讨论广义的混合现实还是特指具有VR透视的混合现实。此外，普通Quest用户也认为博斯沃思的描述不清晰，难以区分全沉浸式虚拟现实和将数字内容叠加到现实世界视图的混合现实。

索尼最近发布了PlayStation VR2的上个月下载排行榜，分为美区和欧洲区。具体榜单如下。

Niantic计划以约35亿美元的价格向Scopely出售其视频游戏业务，包括《Pokémon Go》。Scopely隶属于沙特的Savvy Games Group，此次收购将推动沙特的经济多元化。PICO推出了“推荐购买赢现金”活动，鼓励用户推荐其他人购买PICO 4 Ultra系列产品，推荐人和被推荐人都可以获得奖励。Skydance Interactive发布了VR游戏《Behemoth》，让玩家与巨兽进行搏斗，创意总监讨论了在不同头显上开发游戏的挑战。Potam宣布VR节奏打鼓游戏《Smash Drums》将登陆PSVR 2。PICO发布了PICO Unity & Unreal Integration SDK v3 1 0，以简化开发流程。Petricore确认混合现实游戏《Mythic Realms》将登陆Meta Quest Store。Anagan79发布了名为Quest APK Installer的新工具，用于扫描和安装APK文件。Alpha3D收购moonlander，打造跨设备的XR UGC社区。《Detective VR》将发布，玩家可以在游戏中扮演侦探。英国康沃尔郡使用VR头显展示护理工作，提高吸引力和弥补职位空缺。新疆昌吉州消防救援支队利用PICO头显推进消防宣传工作，增加对消防安全的理解。

Meta正在积极利用VR头显和AR眼镜来帮助训练机器人，并已经发布了数据集HOT3D和人机协作研究框架PARTNR等工具。最新的研究来自佐治亚理工学院，他们利用Meta的Project Aria眼镜来帮助训练机器人执行日常任务。传统上，教导机器人完成任务需要通过机器人远程操作进行数据收集，这种方法非常缓慢和笨拙。然而，佐治亚理工学院的研究团队通过利用Project Aria眼镜的传感器来收集"人类数据"，从而大大减少了训练机器人所需的远程操作数据量。这一突破有望帮助机器人学习人类可以演示的任何任务。研究人员开发了EgoMimic算法框架，利用人类数据和机器人数据进行类人机器人开发。通过这个新框架，机器人在各种任务中的表现提高了400%。未来，人形机器人可以使用自中心的数据进行大规模训练，以便以与人类相同的方式执行各种任务。

英国康沃尔郡正在利用虚拟现实头显展示护理工作的内容，希望通过沉浸式体验的方式吸引更多人从事护理工作，以弥补目前约1000个职位空缺。康沃尔郡的护理行业正在采用虚拟现实头显来展示护理工作，并帮助学生虚拟体验相关任务，如处理流血事件、记录体温和进行垃圾分类等。通过这种身临其境的体验并实时回答有关未来职业的问题，团队希望提高护理工作的吸引力，并填补这1000个职位空缺。负责人娃尔·史密斯表示，虚拟现实头显可以吸引学生，给他们带来一种"实时"体验。康沃尔郡目前有约1.5万名一线护理人员，但该行业仍有大约1000个职位空缺。

Skydance Interactive发行了VR大作《Behemoth》，游戏的创意总监兼工作室高级创意副总裁Shawn Kittelsen讨论了开发VR游戏时面临的挑战。他指出在为不同性能的头显开发体验时存在性能和图像保真度之间的权衡。《Behemoth》是一款原生帧率游戏，可以支持从Quest 2到PSVR 2和高端PC的所有设备。Kittelsen还提到游戏中的动态物理对象对性能的挑战，以及在不同平台之间的差异，例如在PS5上添加了更高的保真度。他还讨论了VR的未来发展，认为可穿戴设备的发展将超过头戴式显示器，并预测接下来15年内两者之间的差距将趋于忽略不计。Kittelsen认为VR还处于萌芽阶段，但是它提供了与传统平板电视不同的独特体验。当谈到未来计划时，他表示将继续为《Behemoth》添加更多内容，并探索不同类型的沉浸式游戏。