Nweon

该篇文章总结了近期美国专利及商标局公布的一批AR/VR专利。其中涉及的专利内容包括节能系统和方法、多模态摄像头帧共享算法、边缘载波聚合通信的系统和方法、可穿戴电子设备的天线、用户与人工现实环境交互的系统和方法等。此外，还包括一些苹果和三星公司的专利，如监测鼻呼吸的方法和装置、头显和面部界面、人体手势识别和活动检测的运动轨迹数据增强和电磁签名合成、在VR场景中渲染视频图像的方法等。这些专利涵盖了AR/VR领域的各个方面，展示了技术和创新的发展趋势。三星的专利涉及可穿戴电子设备和头戴式显示器，其中可穿戴电子设备包括显示器和镜片。头戴式显示器则包括摄像头、显示器和透镜组件。索尼的专利涉及游戏体验模态扩展、渲染方法和系统、校准装置和图像显示方法等。高通的专利涉及自适应注视点编码，以实现分割渲染。微软的专利涉及采用表面重建网格和实时视频叠加的混合现实环境显示方法。Magic Leap的专利涉及使用无线Fingerprint的跨现实系统和虚拟和真实对象的记录。Snap的专利涉及从二维图像重建三维场景和基于像素的时尚单品变形。HTC的专利涉及控制器、检测设备和可穿戴设备。这些专利涵盖了XR行业的不同方面，如显示技术、用户交互、虚拟内容生成等。

《哪吒5DVR》和《源起华夏5DVR》是石代科技和芒狗动画与国内多支动画制作团队合作的大型XR项目。用户可以通过穿戴PICO头显，在沉浸式5D全息+VR主题体验空间中感受神话和历史故事的魅力。苹果提出了一种基于用户姿势和握持方式动态改变物理对象操作方式的方法，以提高用户体验。微软提出了一种利用动态直方图匹配进行色调映射的技术，以增强图像对比度和减少噪点。Meta宣布成立5000万美元的创作者基金，发布Meta Horizon Worlds桌面编辑器的抢先体验版，以支持创作者开发引人入胜的内容。Niantic介绍了协作创作系统CoCreatAR，可以促进异地开发人员和现场合作者之间的实时交互，提升创作效率。其他新闻还包括关于VR头显、多手重建、游戏发布等内容。

根据《南方都市报》报道，深圳龙岗粤洲宴5D光影宴会艺术中心发布了《哪吒5DVR》大空间项目以及《源起华夏5DVR》项目。这些项目使用PICO头显，让用户身临其境地体验一系列场景内容。《哪吒5DVR》以哪吒为主题，通过沉浸式5D全息+VR空间体验，用户穿戴PICO头显可接近哪吒这一神话人物。该项目2024年立项启动，历经一年的打磨。石代科技集团表示，选择哪吒这一IP既源于对传统文化的热爱与传承，也看中了其巨大的商业价值。《哪吒5DVR》将于6月1日正式上线。另外，《源起华夏5DVR》项目已经开放体验，穿戴PICO头显的用户可以进入“源起华夏”的世界，并与虚拟角色实时互动，带来沉浸式体验。这些大空间项目由石代科技和芒狗动画联合国内多支动画制作团队打造，并有代表作品包括《哪吒之魔童闹海》、《哪吒之魔童降世》、《大圣归来》和《姜子牙》等。

苹果提出了一种动态选择操作方式的方法，可以通过用户的姿势和握持方式动态改变物理对象的操作方式。该方法的一个实施例是通过追踪数据和其他输入确定物理对象的姿势和握持，使用户能够无缝地改变物理对象的操作方式，而不中断工作流程。该方法可以应用于XR体验设备，如控制器和电子设备，用于选择不同的操作模式，例如听写模式、标记模式、擦除模式等。基于用户输入向量和追踪数据来确定物理对象的特征向量，选择当前操作模式，并进行相应的操作。这项技术的专利申请于2022年7月提交，并由美国专利商标局公布。此技术的应用有望提升用户在XR环境中的操作体验。

微软提出了一种利用动态直方图匹配的色调映射技术，用于改善低对比度图像的显示。该技术通过生成与目标直方图匹配的图像直方图来进行色调映射。在实施中，系统通过对输入图像直方图应用平滑操作，生成目标直方图，以便在输出图像中提供更大对比度的连续像素值。生成的目标直方图可以用于将输入图像的像素值映射到输出图像的相应像素值，从而增强图像的可解释性。该技术还提出了使用多个输入图像的动态生成的目标直方图进行直方图匹配的方法。通过应用动态直方图匹配来执行色调映射，可以改善图像的对比度，尤其对于低对比度的图像特别有益。这项技术可以应用于XR系统中，对于提高图像显示质量具有重要意义。

研究人员提出了一种名为HeadShift的技术，它采用动态增益来改进头部指向的人体工学和精度。该技术以眼-头协调为基础，通过不同的速度控制视口和光标。实验结果显示，HeadShift可以减少错误率和工作量。 传统的头部指向存在一些缺点，如选择只能在显示中心进行，光标速度与头部旋转速度有关等。而HeadShift通过动态控制显示增益来解决这些问题，使光标由头部控制，但移动速度比头部快。 研究人员通过两项研究评估了HeadShift的性能和可用性，发现HeadShift的错误率较低，并能改善人体工学。 总的来说，HeadShift技术对于免手交互非常有吸引力，特别是对于内置头部追踪的头戴式显示器。该技术提高了输入精度，减少了用户努力，并改善了人体工程学。

近年来，三维手姿估计方法在虚拟现实等领域的应用受到广泛关注。然而，手部检测和重建仍然存在一些挑战，尤其是在构建有效的多手重建系统方面。为了解决这个问题，英国帝国理工学院和上海交通大学团队提出了一个数据驱动的管道。该管道由实时全卷积手部定位和高保真transformer-based三维手部重建模型两部分组成。为了建立一个鲁棒且稳定的检测网络，团队引入了一个大型数据集，其中包含超过2M张具有不同照明、照明和遮挡条件的手部图像。该方法在效率和准确性方面优于以前的方法。手部检测和重建的研究一直是一个长期的问题，尤其在处理in-the-wild图像时更具挑战性。通过引入一个鲁棒的单状态无锚点检测器，团队提出了一个鲁棒的手部检测方法，其运行速度超过每秒100帧（fps）。另外，研究人员还提出了一个高保真的3D手部姿态估计方法，该方法可以在FreiHand和HO3D基准数据集上实现更好的图像对齐和性能。整体而言，这个研究提出了一个全栈手部检测和3D姿态估计框架，并在不同遮挡和光照条件下稳健地检测手部。

卡马克之前对Meta（前Facebook）的战略方向提出了担忧，指出其过分强调混合现实（MR），而不是创造有价值的应用。他认为MR应该是AR世界的基石，但不能成为主流体验。卡马克指出，开发者应该选择改变设计以获得良好用户体验，而不是仅仅制作MR应用。对此，Meta首席技术官博斯沃思回应称，他们现在使用MR来统称MR/VR。然而，许多开发者对这样的描述感到困惑，无法确定Meta是在讨论广义的混合现实还是特指具有VR透视的混合现实。此外，普通Quest用户也认为博斯沃思的描述不清晰，难以区分全沉浸式虚拟现实和将数字内容叠加到现实世界视图的混合现实。

索尼最近发布了PlayStation VR2的上个月下载排行榜，分为美区和欧洲区。具体榜单如下。

Niantic计划以约35亿美元的价格向Scopely出售其视频游戏业务，包括《Pokémon Go》。Scopely隶属于沙特的Savvy Games Group，此次收购将推动沙特的经济多元化。PICO推出了“推荐购买赢现金”活动，鼓励用户推荐其他人购买PICO 4 Ultra系列产品，推荐人和被推荐人都可以获得奖励。Skydance Interactive发布了VR游戏《Behemoth》，让玩家与巨兽进行搏斗，创意总监讨论了在不同头显上开发游戏的挑战。Potam宣布VR节奏打鼓游戏《Smash Drums》将登陆PSVR 2。PICO发布了PICO Unity & Unreal Integration SDK v3 1 0，以简化开发流程。Petricore确认混合现实游戏《Mythic Realms》将登陆Meta Quest Store。Anagan79发布了名为Quest APK Installer的新工具，用于扫描和安装APK文件。Alpha3D收购moonlander，打造跨设备的XR UGC社区。《Detective VR》将发布，玩家可以在游戏中扮演侦探。英国康沃尔郡使用VR头显展示护理工作，提高吸引力和弥补职位空缺。新疆昌吉州消防救援支队利用PICO头显推进消防宣传工作，增加对消防安全的理解。