Nweon

手势识别（HGR）在现实场景中的实时应用存在着硬件和计算需求的限制。为了解决这些限制，开罗美国大学提出了一种基于骨架的动态HGR框架。该框架将动态手势识别简化为静态图像分类任务，通过数据级融合技术将动态手势的3D骨骼数据编码为静态RGB时空图像。框架利用一个专门的端到端集成调谐器（e2eET）Multi-Stream CNN架构，优化数据表示之间的语义连接，并最大程度地减少计算需求。测试结果表明，该框架在5个基准数据集上显示出与最先进技术相媲美的性能。研究人员强调该框架在虚拟现实/增强现实和环境智能等领域增强实时应用的潜力，为动态手势识别提供了可扩展和高效的解决方案。该框架成功地将动态手势识别任务转换为静态图像分类任务，具有稳健的、轻量级的、实时的特点。研究人员表示进一步的努力应该集中在通过定制的机器学习/深度学习优化方法来提高计算效率，从而提高框架的性能和有效性。

XR技术具有巨大的生产力潜力，因此有必要改进XR的文本输入解决方案。谷歌、伯明翰大学、哥本哈根大学、亚利桑那州立大学和西北大学的研究人员调查了XR文本输入技术的现状，并重点关注键盘作为基本工具的重要性。他们讨论了XR带来的独特挑战和机遇，并综合了现有解决方案的主要趋势。现有的解决方案要么效率低下，要么精度有限，要么需要繁琐的物理设置。在XR中缺乏适当的文本输入方法将阻碍生产力工具、沉浸式虚拟世界体验和潜在的超级生产力应用程序的开发。XR环境的独特挑战需要量身定制的方法，如高分辨率显示器和准确的手指跟踪可能会阻碍传统的输入法。现有的文本输入性能比PC差，无论是物理键盘还是虚拟键盘。谷歌研究人员提到了一些新颖的人体工程学光线投射技术和表面锚定的虚拟键盘作为解决方案。机器学习解码模型也可以提高文本输入的准确性和速度。

PICO近日在PICO互联上开始了手势追踪的公测，旨在评估和优化裸手操作体验。PICO互联是一套工具软件，允许用户在一体机内跨平台使用PC，畅玩Steam VR游戏和观看影音视频。如之前预告的那样，PICO互联将纳入串流手势追踪的功能，并且现在团队已经开放了公测入口。公测版本具有特定的功能和注意事项。有兴趣的用户可以通过提供的二维码报名参与公测。另外，用户还可以下载飞书并通过链接加入群聊。

小派科技最新推出的VR头显Dream Air被称为“全球最轻、最薄、最小的8K全功能VR”，重量不到200g。它具备inside-out定位和内置眼动追踪技术，采用Micro-OLED显示方案，能够完整保留高端VR设备的全部功能。该产品还集成了高品质立体声扬声器和麦克风，免去了佩戴耳机的不便。除此之外，Dream Air还提供了磁吸式处方镜片解决方案和智能自动调节头带设计，为用户提供清晰的视觉体验和极致的舒适度。设计上，Dream Air采用了现代简约的外观设计，展现出更强的时尚感和亲和力。该产品将为用户带来真实可感的价值体验，并被认为将开启VR设备的全场景应用时代。Dream Air预计于2025年5月底开始发货，售价为9699元。

华盛顿大学、麻省理工学院、马萨诸塞大学和加州大学的研究人员展示了一种用于近眼显示的大孔径、宽视场的超光学双目镜。他们采用了双透镜结构，其中第一透镜起到入口孔径和校正板的作用，第二透镜起到对焦透镜的作用。研究人员通过采取步进式方法，首先在1厘米孔径的元光学双透镜上展示了80度视场的概念，然后演示了2厘米孔径和60度视野的全尺寸系统。实验结果显示，超光学双目镜在至少60度全视场内表现出一致的性能，与商用折射透镜相当，并且在宽视场下成像质量更好。研究人员指出，这项研究缩小了先前宽视场超透镜演示与实际应用之间的差距。然而，超光学的孔径受到电子束光刻可行写入时间的限制，制造技术的改进和更大周期性超原子的设计可能有助于克服这个问题。

斯蒂文斯理工学院、佐治亚理工学院和伊利诺伊大学厄巴纳-香槟分校的研究人员共同开发了一种基于生成式模型的实时交互框架，名为RITA。该框架可以将用户上传的照片转换为能够实时对话互动的数字化身，并利用生成式建模的最新进展来增强用户体验和开拓虚拟现实和游戏应用的新途径。RITA的研究展示了集成计算机视觉和自然语言处理技术以创建身临其境和交互式数字角色的潜力。然而，由于视频生成的固有延迟，实时应用难以实现。RITA的研究团队通过提出一种新颖的架构，结合了实时处理的即时性和生成模型的深度，以动画化静态肖像。通过集成实时反馈机制和大型语言模型的创新应用，用户可以在一个无缝的、响应式的环境中与虚拟角色互动。RITA在实验证明在延迟、质量和适用性方面优于现有模型，预示着交互式数字化身的新时代的到来。

谷歌在一项专利申请中提出了一种用于头显的弯曲透明波导，通过在波导中形成中间图像来改善用户体验。头显包括微显示器和光学继电器，通过光学继电器将发射的光放大、反转或同时放大，并将中继光提供给波导的另一部分，以在波导中形成中间图像。然后，波导将中间图像提供给光学输出系统，最终向用户的眼睛提供中间图像。通过使用光学继电器在波导中形成中间图像，可以减小光学输出系统的尺寸。此外，通过减少波导内的光与外部光源或波导表面的相互作用或衍射，可以减少离耦光中的像差和重影的数量。谷歌首次提交了这项专利申请名为“Curved see-through lightguide with intermediate focus”于2024年4月，该专利于2024年12月25日公布。

苹果公司在一项专利申请中提出了一种灰尘缓减技术，以确保头戴式显示设备的镜片安装不受灰尘和其他杂质的影响。该专利申请展示了可移动透镜类型的头戴式设备，其中透镜由光学透明材料制成，可用于显示图像。此外，专利申请还提到了可拆卸的视力矫正透镜，用于矫正用户的视力缺陷。该专利申请还介绍了利用运动安装对准结构将透镜精确安装到设备上的方法。此外，专利申请还提及了将粉尘缓减结构与对准结构相结合的方法，以防止灰尘对设备的影响。这项专利申请名为“Lens mounting systems”，于2023年提交，并已在2024年公布。

根据映维网的报道，Ray-Ban Meta智能眼镜在欧美假日季备受欢迎，其配套应用的下载量大幅增长。据高盛分析师Jack McFerran透露，Meta View应用的下载量在十月同比增长超过了200%。Ray-Ban Meta智能眼镜是由EssilorLuxottica与Meta合作推出的，EssilorLuxottica是意大利眼镜制造商，并拥有知名品牌Ray-Ban和Oakley。这次合作是两家公司专业知识的互补，EssilorLuxottica负责眼镜的设计、制造和分销，而Meta负责智能技术的开发。 这次合作的创意之处在于EssilorLuxottica的时尚专业知识和Meta的技术专长的结合，确保了Ray-Ban Meta智能眼镜的时尚外观和高质量。此外，这款智能眼镜的价格也具备竞争力，售价在300美元到379美元之间，同时带来了炫酷便利的人工智能功能，是人工智能的理想载体之一。 据《金融时报》报道，Meta计划在最早2025年为Ray-Ban智能眼镜添加一个显示屏，用于显示虚拟助手的通知或回复。这一消息显示，Meta对智能眼镜的功能持续进行改进和升级。 文章来源：映维网（Nweon），链接：https://www.nweon.com/archives/131715

Etermax是一家游戏开发工作室，从2009年开始涉足游戏开发，并在2013年推出的《Trivia Crack》大获成功。该游戏已经下载超过8亿次。现在，Etermax正在探索XR领域，并于11月28日向Meta Quest推出了《Trivia Crack World》。这款游戏评分为4.9星，为休闲游戏玩家、益智问答爱好者和家庭提供了一个沉浸式的体验。游戏设定在一个充满活力的知识主题游乐园中，玩家可以与《Trivia Crack》中的角色实时互动，参与各种问答挑战和与全球在线社区互动。Etermax的产品主管表示，《Trivia Crack World》旨在提供一款全新的VR游戏。游戏的开发由Etermax独立完成，包括设计师、程序员等20多人的VR游戏团队。除了单人游戏版本外，还有一个多人游戏版本，可以与其他玩家一起竞争。玩家可以选择独自游戏或参与私人比赛，并享受友好的问答对决。